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بسم all‏ الرحمن الرحيم والصلاة والسلام على اشرف الخلق سيدنا ونبينا محمد صل الله عليه وسلم Lal‏ بعد ؛ جاء هذا الكتاب 
بعنوان الذكاء الاصطناعى الجيومكانى أسس ومفاهيم بالتطبيق على برنامج ArcGIS Pro‏ ليكون حجر الأساس للمهتمين 
بمواكبة التطور الهائل فى تقنيات نظم المعلومات الجغرافية وتوفير البيانات الضخمة وبيانات الوقت الحقيقى وانترنت الأشياء 
والتحول الرقمى من أجل استخدام الذكاء الاصطناعى ف ادارة وتنمية البيئة حيث يفتح المجال لفهم الأساس النظرى للذكاء 
الاصطناعى الجيومكانى و يمكننا من استخدام أدوات الذكاء الاصطناعى فى برنامج ArcGIS Pro‏ ونحن على دراية بالمفاهيم 
النظرية للعلم ذاته ؛ للقدرة على تفسير النتائج واستخدام النماذج المثلى ذات الجدوى بمشكلة الدراسة ؛ وذلك من خلال 
ستة فصول تسبقهما مقدمة حيث جاء الفصل الأول لتوضيح مبادىء تعلم الألة ؛ بينما يشرح الفصل الثانى خوارزميات تعلم 
الالة بأنواعها فى حين أن الفصل الثالث يعرض أسس التعلم العميق ليأتى الفصل الرابع لتوضيح أنواع الشبكات العصبية 
الاصطناعية ؛ وأخيراً يأتى الفصل الخامس والسادس للتطبيق على برنامج ArcGIS Pro‏ حيث cle‏ الفصل الخامس بشرح 
أدوات الذكاء الاصطناعى ( تعلم الألة والتعلم العميق ) والفصل السادس بتطبيقات على استخدام الذكاء الاصطناعى 


الجيومكانى فى برنامج ArcGIS Pro‏ 


المؤلف 
رشاصابر dági‏ 


أحمد محمود عباس 


- 


مقدمة 

الذكاء الاصطناعى الجيومكانى : 0۸۱ء6 

يلعب الذكاء الاصطناعي (AI)‏ 555 متزايد الأهمية في تعزيز فهمنا لعلوم الأرض وقدرتنا على مواجية التحديات الملحة للتغير 
البيئي. توفر نماذج الذكاء الاصطناعي أدوات قوية لتحليل مجموعات البيانات الضخمة والمعقدة الناتجة عن منصات 
الاستشعار عن بعدء ونماذج المناخء وأنظمة المراقبة البيئية. ومع ذلك» من الضروري أن يكون لدينا نماذج دقيقة وفعالة 
لتحليل البيانات الجغرافية المكانيةء خاصة في الحالات التي تكون فما البيانات المصنفة نادرة. ولسوء الحظء فإن تطوير مثل 
هذه النماذج يشكل تحديا كبيرا فى العديد من التخصصات. 
يكمن أحد التعقيدات الرئيسية في الطبيعة الموزعة لبيانات علوم الأرض. غالبًا ما يكون الوصول إلى هذه البيانات وتحليلها 
bal‏ صعبًا ويستغرق 89 طويلاًء مما يجعل من الصعب تطوير نماذج وتطبيقات فعالة للذكاء الاصطناعي لحل التحديات 
الملحة في علوم الأرض. وقد أدت هذه الظروف إلى الحاجة إلى مهارات وأدوات Garais AST‏ للتدريب ونشر النماذجء مما 
يضيف طبقة أخرى من التعقيد إلى مهمة صعبة بالفعل. وما يزيد الامور صعوبة أن التوفر المحدود لبيانات الحقيقة 
الأرضية لأغلب التطبيقات غالبا ما يؤدي إلى نماذج ذكاء اصطناعي ذات دقة تنبؤية ضعيفةء وهو ما قد يحد بشدة من 


تأثيرها. 


للتغلب على هذه المشكلات. من الضروري تطوير نماذج أفضل يمكنا التنبؤ بالبيانات الجغرافية المكانية وتحليلها بدقةء 
حتى عندما تكون البيانات المصنفة نادرة. أحد الحلول المحتملة لهذه المشكلة هو استخدام نماذج الأساس الجغرافي المكاني» 
وهي نماذج مدربة مسبقًا تستخدم بيانات الاستشعار عن بعد ويمكن ضبطها بدقة eld.‏ مختلفة. وقد أظبرت هذه النماذج 
بالفعل فعاليتها في تطبيقات مثل رسم خرائط الكوارث على سبيل المثالء الكشف عن الفيضانات. والكشف عن الحروقء 
ومراقبة التغير البيئي على سبيل «SUL‏ استخدام الأراضيء وتغير الأراضي» واكتشاف البيانات مثل» إعادة بناء الصورء 
والبحث عن التشابه. هناك asl‏ اهتمام متزايد بمواصلة تطوير هذه النماذج وتكييفها لاستخدامها في التحليلات الجغرافية 


المكانية لاتخاذ القرارات الحاسمة. 


المفاهيم الرئيسية: 


GeoAl 

الذكاء الجيومكانى هو مجال gale‏ ناشئ متعدد التخصصات ag dy‏ على تسخير إبتكارات العلوم المكانية والتعلم الآلي والتعلم 
العميق » وإستخراج البيانات » والحوسبة لإكتشاف المعرفة الجغرافية المكانية وإستخراج معلومات مفيدة من البيانات 
المكانية الضخمة . 

فهو تكامل الذكاء الاصطناعي (Al)‏ مع البيانات المكانية لزيادة فهم المكان وحل مشكلاته t‏ فيتضمن GeoAl‏ تطبيق تقنيات 
الذكاء الاصطناعي التقليدية لتوليد البيانات المكانية من خلال استخراج المعلومات وتصنيفها واكتشافها من البيانات 

المنظمة وغير المنظمة . 

لهذا تعود أهمية GeoAl‏ في قدرته علي إستنباط المعنى من مجموعة البيانات المعقدة » وامكانية تحويل البيانات إلى معلومات, 
وتحسين جودة البيانات واتساقها ودقتها c‏ وتسريع الوقت اللازم لتحقيق الفهم الكامل للمكان « ويساعد أيضا في إيجاد حلول 
أكثر كفاءة وأكثر دقة للمشكلات الجيومكانية » وإتخاذ القرارات وبالتالي بناء مستقبل يتسم بالاستدامة . 


Artificial 
Intelligence 


التحليل المكاني : 

التحليل المكاني هو نهج تحليلي يستخدم في فهم وتحليل البيانات المكانيةء وهي البيانات التي ترتبط بالمواقع الجغرافية . ييدف 
التحليل المكاني إلى استكشاف العلاقات والأنماط الجغرافية في البياناتء وتفسيرها لفهم الظواهر المكانية واتخاذ القرارات 
بشأنها. يستخدم التحليل المكاني مجموعة متنوعة من الأساليب والتقنيات الإحصائية والجغرافية. مثل نظم المعلومات 
الجغرافية والتحليل الإحصائي الجغرافي والنمذجة الجغرافية والتصور المكاني» لفهم وتفسير البيانات المكانية. تتضمن 
تطبيقات التحليل المكاني تحليل الانتشار الجغرافي وتحليل العلاقات المكانية وتحليل الانماط المكانية وتحليل الشبكات 
والتنبۋات . 


الذكاء الاصطناعي (Al)‏ : 
قدرة الآلة على أداء المهام التي تتطلب محاكاة الذكاء البشريء مثل الإدراك والاستدلال والتعلم. إننا نرى تطبيقات الذكاء 
الاصطناعي في كل مكان في حياتنا اليومية في المساعدات الذكية على هواتقناء وق التوصيات على قنوات التواصل الاجتماعي: 


وفي السيارات ذاتية القيادة والروبوتات. 


الذكاء الاصطنا 


التعلم الآلي (ML)‏ : 

مجموعة فرعية من الذكاء الاصطناعي تشير إلى مجموعة من التقنيات التي تسمح لأجهزة الكمبيوتر بتعلم الأنماط داخل 
البيانات واكتساب المعرفة دون برمجتها بشكل صريح. تأتي تقنيات تعلم الآلة عادة في شكل طرق إحصائية أو خوارزميات تعتمد 
على البيانات والتي تحل بعض المشاكلات . 
التعلم العميق (DL)‏ : 

مجموعة فرعية من تعلم الآلة تستخدم خوارزميات قابلة للتدريب في شكل شبكات عصبية اصطناعية. حيث إن البنية 
متعددة الطبقات oid‏ الشبكات مستوحاة من كيفية عمل الدماغ البشري. حيث يتعلم البشر ويفهمون العالم من حولهم 
كتسلسل هرمي متداخل من المفاهيم. فخوارزميات DL‏ تعمل مثل الدماغ البشريء حيث يتعلم الكمبيوتر أنماطًا ومفاهيم 
معقدة من خلال تجميع مفاهيم أبسط معا. يتم تحليل بيانات الإدخال الأولية من خلال طبقات مختلفة من الشبكة. حيث 


تتعلم كل طبقة متتالية وتلتقط تعريفات الظاهرات والأنماط الأكثر تعقيدًا وتحديدًا في البيانات. 


Artificial 
Intelligence 


Machine 
Learning 


Deep 
Learning 


الجانب الرئيسي الآخر ل ا60۸ هو تطبيق التعلم JI‏ وتقنيات التعلم العميقء بما في ذلك تقنيات الإحصاءات والتعلم JS‏ 
الواضحة مكانيًاء لتحليل البيانات المكانية لتطبيقات مثل اكتشاف الأنماط المكانية وإجراء التنبؤات والتنبؤات الزمانية 


المكانية. إن استخدام التعلم الآلي التاشئ وأدوات التعلم العميق مع البيانات المكانية يمتح الممارسشين بدائل جديدة 


10 


لاستكشاف مساحات المشكلات الصعبة. إن استخدام أساليب التعلم الآلي على البيانات المكانية, بالإضافة إلى دمج النماذج 
المكانية الواضحة التي تتضمن بعض جوانب الجغرافيا csl)‏ والشكلء والقرب. والمزيد) مباشرة في الخوارزمية لا يمكن أن 
يجعل النماذج أكثر كفاءة فحسب» بل أيضًا في كثير من الأحيان AST‏ دقة وتمثيلاً للواقع الذي نهدف إلى تجسيده. يمكن 
استخدام هذه التقنيات لتخصيص الموارد flu‏ على أنماط مكانية ذات معنى» للعثور على الاتجاهات والشذوذات في المكان 


والزمان»ء ودمج العلاقات المكانية في التنبؤات والتنبؤات. 


Artificial 


Intelli 
— Spatial Analysis 


Vector 
Analytics 


Image & Raster 


Machine Analytics 


Learning 


Modeling 
Spatiotemporal 


Statistics 3D 
Analysis 


Deep 
Learning 


Network Real-Time 


Analysis 


التصنيف الجغرافي الذى : 
يشمل هذا المفهوم تطبيق تقنيات الذكاء الاصطناعي لتصنيف البيانات الجغرافيةء مثل تصنيف أنواع الأراضي» أو تصنيف 
الصور الجوبة لتحديد المعالم الطبيعية أو البنى التحتية. 

التنبؤات المكانية الذكية : 

عبارة عن استخدام الذكاء الاصطناعي في تحليل البيانات الجغرافية لتوقع الأحداث المستقبلية أو التغيرات في الظروف 


الجغرافيةء مثل تنبؤات الطقس أو احتمالات حدوث الكوارث الطبيعية. 
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الفصل الأول : مبادىء التعلم الالى 


12 


تعرىف التعلم الالى: 

يشير التعلم الآلي على انها فرع من الذكاء الاصطناعي يركز على تطوير التقنيات التي تسمح للأنظمة الحاسوبية بالتعلم من 
البيانات والتكيف مع التغيرات بدون الحاجة إلى برمجة صريحة لكل تغيير في البيئة أو Aall‏ بشكل ale‏ يمكن تعريف التعلم 
JYI‏ على Lal‏ مجموعة من الخوارزميات والتقنيات التي تعتمد على البيانات والتي تعمل على أتمتة التنبؤ والتصنيف وتجميع 
البيانات ؛ يلعب التعلم JYI‏ دورًا Lage‏ في حل المشكلات المكانية. 


Building ML 
model 
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z £‏ 
أنواع التعلم الآلى: 
: 


هناك أنواع متعددة من التعلم الآليء ويجب معرفة الفرق بينهما وذلك للقدرة على اختيار النوع المناسب على حسب ما 


EU نحاول التنبؤ‎ 
E 
= 


:Supervised machine learning الخاضع للاشراف‎ 


= 


التعلم الخاضع للاشراف يستلزم وجود شخص مشرف على عملية التعلم حيث يتم تمييز الاشياء من خلال مسمياتها Labeled‏ 
وهى تماما تشبه الطفل حين يتلقى معلوماته من الوالد ( بمثابة المشرف فى عملية التعلم ) ؛ ليبدأ الطفل فى تكوين صورة عن 
كل ما يتعلمه Wied‏ عند رؤبته aball‏ لاول مرة يسأل المشرف على التربية عن ما يراه فيعطى المشرف مسىى القطة ويبدأ الطفل 


فى تكوين صورة القطة فى diad‏ وفيما بعد حينما يرى القط ( المواصفات AI‏ اصبحت عالقة فى ذهنه ) يعرف تلقائى انها قطة 


m 


Features 


" Li 


(big ears, big nose, big mouth, DOG) 


WS cuyas حيث تمن يانات‎ Jil التغلم‎ Lais ale مسيظ اع‎ ga GL ADU A الععلم‎ ol gall Aad 
من قيم الميزات وقيم التسمية المعروفة. يتم استخدام التعلم الآلي الخاضع للإشراف لتدريب النماذج من خلال تحديد العلاقة‎ 
بين الميزات والتسميات في الملاحظات السابقةء بحيث يمكن التنبؤ بتسميات غير معروفة للميزات في الحالات المستقبلية.‎ 


الانحدارأو التوقع Regression‏ : هو شكل من أشكال التعلم الآلي الخاضع للإشراف حيث تكون التسمية المتوقعة من قبل 
لنموذج قيمة رقمية. على سبيل المثال (سعر بيع العقار بناء على مساحته. وعدد الغرف به. ومقاييس اخرى مثل الموقع ). 


التصنيف 05غ6ه355141|)_:التصنيف هو شكل من أشكال التعلم الآلي الخاضع للإشراف حيث تمثل التسمية تصنيفا 
أو فئة .هناك سيناريوهان شائعان للتصنيف مثال تصنيف الكائنات المختلفة بناء على صفاتها أو تصنيف الصور . 


‘Binary classification التصنيف الثنائيى‎ 


في التصنيف الثنائي. تحدد التسمية ما إذا كان العنصر الذي تمت ملاحظته هو أم لا أى ان نماذج التصنيف الثنائي تتنبأ 
بواحدة من نتيجتين متبادلتين فقط ايجابى أو سلبى (0 و 1) على سبيل المثال التنبؤ بما إذا كان المريض معرضا لخطر 
الإضابة نموكن :مدد مكل مرضن'ا بناءاً إلى مقا UNTER‏ جلوكوز و a‏ 


تصنيف متعدد الفئات Multiclass classification‏ : 


التصنيف متعدد الفئات يسمح للتنبؤ بتسمية تمثل واحدة من فئات محتملة متعددة. على سبيل المثالء التنبؤ بأنواع 
السات Geta Sal‏ ول احعافيا Dis‏ الاق أو التسفيف حرسي das) pua‏ قاب كل 


my input = ([[3,2], Classification التصنيف‎ 
[6,6],[2.6,3], 


[7,8], [3.5,5], [Predict > [0.5,0.8] : [0] 
[6,11]]) [8.5,10] 2: [SIS] 
my output = [0,1,0,1,0,1] 


my input = ([[3,2], Regression لتوقع‎ ١ 


[6,61,[2.6,3], 
[7,8], [3.5,5], 
[6,11]]) 


SVR predict[0.5,0.8] : 
[-0.66959266] 


Svc predict[8.5,10] 
[1.51415098] 


my output — [0,1,0,1,0,1] 
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التعلم الآلي غير الخاضع للإشراف Unsupervised machine learning‏ : 


يتضمن التعلم الآلي غير الخاضع للإشراف نماذج تدريب باستخدام البيانات التي تتكون فقط من قيم الميزات دون أي تسميات 
معروفة. تحدد خوارزميات التعلم الآلي غير الخاضعة للإشراف العلاقات بين ميزات الملاحظات في بيانات التدريب. 


ولتوضيح هذا النوع على مثال الطفل الذى يتلقى التعلم من المشرف ( الأب) فنتخيل عدم وجود الاب فى هذه الحالة فعند 
مشاهدة الطفل للكائنات فيتعلم الطفل بمفرده عن طريق ملاحظة العقل البشرى للصور ويبدأ العقل فى جمع الصفات 
المتشاببة من هذه الصور فى مجموعات تسمى Clustering‏ 


أى أن تعلّم الآلة غير الخاضع للإشراف هو عندما تعطي الخوارزمية بيانات إدخال بدون أي بيانات إخراج مصنفة. ثم تتعرف 
الخوارزمية من تلقاء نفسها على الأنماط والعلاقات داخل البيانات وفيما بينها. فيما يلي بعض أنواع تقنيات التعلم غير الخاضع 
للإشراف. 


أنظمة المجموعات Clustering‏ 


النموذج الأكثر شيوعا للتعلم الآلي غير الخاضع للإشراف هو التجميع .تحدد خوارزمية التجميع أوجه التشابه بين 2 calla‏ 
استنادا إلى ميزاتهاء وتقوم بتجميعها à‏ مجموعات منفصلة. 


التصنيف» فأنت تعرف بالفعل الفئات التي L! os‏ الملاحظات à‏ بيانات التدريب؛ لذلك تعمل الخوارزمية عن طريق تحد 
ESL‏ بين الميزات وتسمية التصنيف المعروفة. à‏ التجميعء لا توجد تسمية نظام مجموعة معروفة مسبقا وتقوم الخوارزمية 
بتجميع ملاحظات البيانات استنادا إلى تشابه الميزات فقط. 
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في بعض الحالات» يتم استخدام التجميع لتحديد مجموعة الفئات الموجودة قبل تدريب نموذج التصنيف. على سبيل «JUI‏ 
قد تستخدم التجميع لتقسيم العملاء إلى مجموعات, ثم تحليل هذه المجموعات لتحديد فئات مختلفة من العملاء وتصنيفها 
(قيمة عالية - حجم منخفض ومشتري صغير متكرر وما إلى ذلك). يمكنك بعد ذلك استخدام التصنيفات الخاصة لتسمية 
الملاحظات في نتائج التجميع واستخدام البيانات المسماة لتدريب نموذج تصنيف يتنبأ بفئة العميل التي قد ينتمي إلها عميل 


جديد. 


تخفيض الأبعاد : 


هي الأساليب التي تستخدم لتحويل مجموعات من البيانات ذات الأبعاد العالية إلى تمثيلات ذات أبعاد منخفضة أو مشتقات 
فا oda e La‏ التعييات عن تعرس من الخ جع c‏ وسيل ضمليات datas!‏ وال وق ت la, acit‏ مالا البيانات 


Clustering التجميع‎ X^ 
my input =([[4,2],[6,6], 


[2.6,4] , [7,8], “Predict | La 


[3.5,5], [6,111]) 


Dimensionality Reduction تخفيض الأبعاد‎ TS 
my input = ([ ; 
E 0.07038567, 0.12192826], 


[-0.01988238, 0.1793354 ], 


أولا:- الانحدارأو التوقع Regression‏ 


يتم تدريب نماذج الانحدار على التنبؤ بقيم التسميات الرقمية استنادا إلى بيانات التدريب التي تتضمن كل من الميزات 
والتسميات المعروفة. تتضمن عملية تدريب نموذج الانحدار (أو أي نموذج تعلم آلي خاضع للإشراف) تكرارات متعددة تستخدم 
باستخدام خوارزميات ومعلمات مختلفة حتى تحقق مستوى مقبولا من الدقة التنبؤية. 


لتدريب نموذج التعلم الآلى الخاضعة للإشراف أربعة عناصررئيسية هى: 


1. تقسيم بيانات التدريب عشوائيا لإنشاء مجموعة بيانات لتدريب النموذج و مجموعة فرعية من البيانات 
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2. استخدم الخوارزمية المناسبة للبيانات المستخدمة . 

3 استخدم بيانات التحقق من الصحة بها لاختيار النموذج عن طريق التنبؤ بتسميات الميزا ت. 

4. مقارنة التسميات الفعلية المعروفة في مجموعة بيانات التحقق من الصحة بالتسميات التي توقعها النموذج. 
وتجميع الاختلافات بين قيم التسمية المتوقعة والقيم الفعلية لحساب مقياس يشير إلى مدى دقة النموذج 
المتوقع لبيانات التحقق من الصحة. 


e» [XX2X3], y 
[XXX], y 
[xX2,%3], y 
[XXX], y 


ملحوظة : بعد كل تدريب والتحقق من صحة التكرار وتقييمه»ء يمكن تكرار العملية باستخدام خوارزميات ومعلمات مختلفة 


مثال لاستخدام التوقع 


عندما نقوم بتدريب نموذجا للتنبؤ بتسمية رقمية (y)‏ استنادا إلى قيمة ميزة واحدة.(<) ؛ على سبيل «SUM‏ نقوم بتدريب 
نموذج يتوقع UI‏ عدد المسافرين الى منطقة ما (y)‏ وفقاً لدرجات الحرارة (X)‏ 


درجة الحرارة_ المسافرين_ 
51 1 
| 52 .0 
67 | 14 
65 | 14 
70 | 23 
| 69 | 20 
72 | 23 
75 .26 
| 73 22 
.81 | 30 
78 | 26 
83 36 
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تدريب نموذج انحدار: 


بيانات التدريب بيانات الاختبار 


درجة الحرارة(×) المسافرين (y)‏ درجة الحرارة(«) 2 المسافرين (ر) 


1 51 
0 52 
14 65 
14 67 
20 69 
23 70 
23 72 
22 73 
26 75 
36 83 
30 81 
26 78 
aS 
30 © 
25 e e 
e 
20 e 
15 e 
10 
5 
0 e 
50 60 70 80 90 


لتطبيق خوارزمية على بيانات التدريب وملاءمتها مع دالة تطبق عملية على x‏ لحساب قيم y‏ يتم استخدام خوارزمية 
(الانحدار الخطى ) وتستخدم عن طريق رسم خط يقوم على تقليل متوسط المسافة بين الخط والنقاط المرسومة 


19 


9 ju v 
| a 
P. T d 
e. T 
we 
| » i 
| LT 
0 e 

l 6C 65 70 5 B0 85 


فنا ايع oils d‏ م dil‏ حت كن نن las sd De‏ قا ر da dis pd‏ :ف 
عندما يكون O ga y 40.8850 x‏ 


ومن خلال التدقيق 3( الخط المرسوم نجد أن كل 8355 5 على طول المحور س إلى زيادة 5 لأعلى المحور ص ؛ فعندما كانت 
قيمة ×هو 55( gay‏ 5؛ وعندما تكون x‏ هو 60« gay‏ 10ء وهكذا. 


ومن هذا المنطلق يمكن بسهولة وضع دالة لحساب قيمة لإ لقيمة معينة من ox‏ بطرح الدالة من 50؛ بمعنى آخرء يمكن 
التعبير عن الدالة كما يلي: 


f(x) = x-50 
وهي دالة التي تُعبر عن الاحتمال الشرطي.‎ functionofx — f(x) حيث‎ 


ولفهم الدالة يمكن استخدامها للتنبؤ بقيمة ۷ مع أي درجة حرارة . على سبيل SLL‏ افترض أن توقعات الطقس تخبرنا أنه 
غدا ستكون 77 درجة. يمكننا تطبيق نموذجنا لحساب قيمة Y‏ 77-50 والتنبؤ Gl‏ عدد المسافرين 27 غدا. 
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ولتقييم نموذج الانحدار و للتحقق من صحة النموذج وتقييم مدى توقعه» يتم استخدام بيانات الاختبار واستخدام النموذج 
للتنبؤ استنادا إلى قيمة الميزة(×) ؛ ثم مقارنة التسمية المتوقعة )9( بالقيمة الفعلية المعروفة.(۷) 


فيؤدي استخدام النموذج الذي دربناه » الدالة 50خ 2 f(x)‏ إلى التنبؤات التالية: 


درجة TEN‏ القيمة 
الحرارة50) n‏ المتوقعة $ 
52 0 2 
67 14 17 
70 23 20 
73 22 23 
83 36 28 
40 
b‏ : 
=d‏ : 
p‏ 2 
GE‏ = " 
At ih‏ 10 
2~ 0 
85 80 75 70 65 60 55 50 
x‏ 


الذي يشار إليه في الرسم كخط بين قيم لاو رالتي توضح مدى ابتعاد التنبؤ عن القيمة الفعلية. 


مقا تقييم الانحدار(التوة 


استنادا إلى الاختلافات بين القيم المتوقعة والقيم الفعليةء يمكن حساب gan‏ المقاييس الشائعة المستخدمة لتقييم نموذج 
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متوسط الخطأ المطلق (MAE)‏ 


ولفهم هذا المقياس من خلال المثال السابق يشير التباين إلى عدد القيم التي كان التنبؤ بها خاطتا. لا هم ما إذا كان التنبؤ قد 
تجاوز أو تحت القيمة الفعلية (لذلك على سبيل SUM‏ يشير كل من -3 و+ 3 إلى تباين 3( . يعرف هذا المقياس بالخطأ 
المطلق لكل تنبؤء ويمكن تلخيصه لمجموعة التحقق الكاملة على أنها متوسط الخطأ المطلق (MAE).‏ 


ففي JÓL‏ . متوسط الأخطاء المطلقة )35251535352( 14/6 هو 2.33 


متوسط خطأ تربيعي (MSE)‏ 


يأخذ متوسط مقياس الخطأ المطلق جميع الاختلافات بين التسميات المتوقعة والفعلية في الاعتبار على حد المساواة. ومع 

ذلك» قد نكون بحاجة الى تضخيم الاخطاء عن طريق تربيع الأخطاء الفردية وحساب متوسط القيم التربيعية. يعرف هذا 
المقياس ب متوسط الخطأ التربيعي (MSE).‏ ؛ ففي المثال السابق . متوسط القيم المطلقة التربيعية (وهي 4 و9 و9 و1 و4 و9) 
هو6. 


جذرمتوسط الخطأ التربيعي (RMSE)‏ 


يساعد متوسط الخطأ التربيعي في أخذ حجم الأخطاء في الاعتبارء ولكن لأنه يربع قيم الخطأء فلم يعد المقياس الناتج يمثل 
الكمية التي تم قياسبها. وبعبارة أخرى فى المثال السابق كانت قيمة MSE‏ هو 6 ولكن هذا لا يقيس دقة النموذج بل هو مجرد 
درجة رقمية تشير إلى مستوى الخطأ في تنبؤات التحقق من الصحة. 


فإذا أردنا قياس الخطأ > نحتاج إلى حساب الجذر التربيعي MSEJ‏ ؛ الذي ينتج مقياسا يسمى خطأ تربيعي متوسط الجذرفي 
هذه الحالة BN‏ وهو 2.45 . 


معامل التحديد(82) 


تقارن جميع المقاييس حتى الآن التناقض بين القيم المتوقعة والقيم الفعلية من أجل تقييم النموذج. ومع ذلك» نجد بعض 

التباين العشوائي الطبيعي في قيم Y‏ المتوقعة ally‏ يأخذها النموذج ف plied‏ في تموذج الاتخدارالخطي» تناسب خوارزمية 
lad caa‏ مم قيا يقال من aga‏ التناين رين ADAM‏ وق Ad alga‏ وهر ها سي عامل التكديد شار إلية 
عادة باسم R-Squared giR2‏ وهو مقياس يقيس نسبة التباين في نتائج التحقق من الصحة التي يمكن تفسيرها بواسطة 
eg Sail‏ بدلا فن بعض ASLAM ag Lal‏ الق لزت ر على كم bly‏ التحفق من SLM Dare le) Anal‏ يوم ga‏ عدة غير 
عادي للغاية من المسافرين بسبب مهرجان محلي. 
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R2-1-Y(3)2 + Y6-Y)2 
( القيم ضمن نطاق تسلسلي‎ US سيجما رمز (جمع‎ 2 


اذا كان الامر يبدو معقدا فلا داعى للقلق لانه يمكن لمعظم أدوات التعلم JY‏ حساب هذه المقاييس ؛ لكن الجدير بالاهمية 
هو معرفة ان الناتج يتراوح بين بين 0 و1 » كلما اقتربت القيمة من 1 كلما كان النموذج مناسبا لبيانات التحقق من الصحة. ؛ 


التدريب التكرارق 


تستخدم المقاييس الموضحة أعلاه Bale‏ لتقييم نموذج الانحدار. في معظم سيناريوهات العالم الحقيقيء سيستخدم le‏ 


e‏ تحديد الميزات وإعدادها (اختيار الميزات التي يجب تضمينها في النموذج» والحسابات المطبقة Yale‏ للمساعدة 
في ضمان ملاءمة أفضل). 

e‏ تحديد الخوارزمية (ذكرنا الانحدار الخطي في المثال السابقء» ولكن هناك العديد من خوارزميات الانحدار 
الأخرى) 

o‏ معلمات الخوارزمية (إعدادات رقمية للتحكم في سلوك الخوارزمية» وتسمى بدقة المعلمات الفائقة لتمييزها 
عن المعلمات ×و.( لا 


ثانياً :- التصنيف Classification‏ 


يعتبر التصنيف مثل الانحدارء فى كونه أسلوب تعلم آلي خاضع للإشراف؛ وبالتالي يتبع نفس العملية التكرارية لتدريب 
النماذج والتحقق من صحتا وتقييمها. لكن فى التصنيف بدلا من حساب القيم الرقمية كما فى نموذج الانحدارء 
تحسب الخوارزميات المستخدمة لتدريب نماذج التصنيف قيم الاحتمال لتعيين الفئة ومقاييس التقييم المستخدمة لتقييم 
أداء النموذج مقارنة الفئات المتوقعة بالفئات الفعلية. 


1- التصنيف الثنائي 


تستخدم خوارزميات التصنيف الثنائي لتدريب نموذج يتنبأ بأحد التسميات المحتملة لفئة واحدة. بحيث يكون التنبؤ اما ب 
True‏ أو False‏ ( القيم حقيقية أم خاطئة) ففي معظم السيناريوهات تتكون البيانات المستخدمة لتدريب النموذج والتحقق 
من صحته من قيم ميزة متعددة(<) وقيمة y‏ تكون بين قيميتن إما 1أو0 


مثال تطبيقى ( التصنيف الثنائي) 


لفهم كيفية عمل التصنيف الثنائي»ء دعونا ننظر إلى مثال مبسط يستخدم ميزة واحدة (x)‏ للتنبؤ بما إذا كانت قيم رهي 1 أو 
فا لدعا ق abend‏ نسي ااك Saad‏ مخ اترك © Le deg‏ عوقو اذا كان الى عسات ا الك )2( 
ام لاء (0) 


بيانات التدريب بيانات الاختبار 


نسبة الجلوكوز(“) احتمالية المرض الفعلية (y)‏ نسبة الجلوكوز ١‏ احتمالية 


المرض 
114 1 112 1 
72 0 71 0 
116 1 87 1 
0= غير مريض 0 = غير مريض 
71 مريض 71 مريض 
تدريب نموذج التصنيف الثنائي: 


كقيمة بين 0.0 1.09( بحيث يكون الاحتمال الإجمالي لجميع الفئات المحتملة هو 1.0. على سبيل JEU‏ إذا كان احتمال الحالة 
مصابة بالمرض 0.7 فهناك احتمال مقابله يبلغ 0.3 أن الحالة ليست مصابة بالمرض . 


هناك العديد من الخوارزميات التي يمكن استخدامها للتصنيف الثنائيء منها الانحدار اللوجستي. الذي يستمد دالة 
Llesigmoid‏ شكل S)‏ )مع قيم بين 0.0 1.09« Jis‏ هذا: 
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50 60 70 80 90 100 110 120 


ملاحظة: 


النقطة المهمة هنا فى هذه الخوارزمية هي الطبيعة اللوجستية للدالة التي تنتجهاء Ally‏ تصف منحنى على شكل S‏ بين القيمة 
الدنيا والأعلى (0.0 و1.0 عند استخدامها للتصنيف الثنائي). 


يمكن استخدام الدالة الرياضية التى تنتجها الخوارزمية فى هذه الحالة ( احتمال صحة (y=1)‏ لالقيمة معينة من .× ) على 


f(x) = P(y=1 | x) 
. تشير الى الاحتمالية بناء على شرط محدد‎ : P 


| : تعبر عن معطوف على؛ تستخدم هذه العلامة لتحديد الشرط الذي يجب أن يتوفر في البيانات Go‏ يتم حساب الاحتمالية 
المرتبطة بهذا الشرط. 


ففى الجدول السابق نجد ان هناك ثلاث قيم من القيم الست في بيانات التدريب» قيمة ( (y‏ فما صحيح بالتأكيدء لذا فإن 
احتمال أن تكون y=1‏ هي 1.0وبالنسبة للملاحظات الثلاث 5,591« نعلم أن ( y‏ ) بالتأكيد tbs‏ لذا فإن احتمال أن y=1‏ 
هو .0.0 يصف المنحنى على شكل S‏ توزيع الاحتمال بحيث يحدد رسم قيمة على السطر الاحتمال المقابل وهو gay‏ .1 


ويتضمن الرسم التخطيطي أيضا خطا أفقيا للإشارة إلى الحد الذي سيتنبأ به النموذج المستند إلى هذه الدالة بالقيمة 
true (1)‏ أو .)0( false‏ يقع sal‏ عند نقطة الوسط ل (0.5 = y(P(y)‏ فبالنسبة لأي قيم في هذه المرحلة أو أعلىء 
سيتنبأ النموذج بالقيمة(1) ؛ بينما بالنسبة لأي قيم أسفل هذه النقطةء فإنه سيتنبأ بالخطأ .)0( de‏ سبيل «SLM!‏ بالنسبة 
للمريض الذي لديه مستوى جلوكوز 90. ستؤدي الدالة إلى قيمة احتمالية تبلغ 0.9. نظرا لأن 0.9 أعلى من عتبة 0.5 فإن 
النموذج يتوقع صواب (1)ويتوقع أن يكون المريض مصابا بداء السكر. 
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تقييم نموذج التصنيف الثنائي: 


وبتطبيق الدالة على بيانات الاختبار كما موضح بالشكل التالى 


50 60 70 80 90 100 110 120 


0 ينشئ النموذج تسمية متوقعة من 1 أو‎ diva على ما إذا كان الاحتمال المحسوب بواسطة الدالة أعلى من الحد أو أقل‎ eli, 
كما هو موضح:‎ (y) لكل ملإحظة. يمكننا بعد ذلك مقارنة تسميات الفئة المتوقعة (9)بتسميات الفئة الفعلية‎ 


نسبة الجلوكوز احتمالية المرض ١‏ احتمالية 
الفعلية (y)‏ المرض المتوقعة 
N‏ )( 


0 0 66 
1 1 107 
1 1 112 
0 0 71 
0 1 87 
1 1 89 
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مقاييس تقييم التصنيف الثنائي: 


الجدير SUL‏ أنه فى اغلبية الاحوال تكون الخطوة الأولى في حساب مقاييس التقييم لنموذج التصنيف الثنائي هي إنشاء 
gi‏ عن النحو اله 


Positive Negative 


i | False‏ الصفة 


4.2 Positive | positive 
dad gioll (FP) 
Predicted 

Label 


False Tri 
Negative Negative 
(FN) 


True Label الصفة الحقيقية‎ 


الصحيحة والسلبيات الصحيحة و الإيجابيات الخاطئة و السلبيات الخاطئة. من ناحية أخرى تعد هذه المصفوفة مفيدة 
لتصور أداء النموذج وتحديد مجالات التحسين. 


y-0: 39-0 ©‏ السلبيات الحقيقية (TN)‏ 
o‏ 1-لإو:0-لا الإيجابيات الخاطئة (FP)‏ 
© 9-0و :1ر السلبيات الخاطئة (FN)‏ 
© 1= لو y=1:‏ الإيجابيات الحقيقية (TP)‏ 
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Accuracy:&à.Jl 


(TN+TP) + (TN+FN+FP+TP) 
في حالة المثال السابق ( نسب الجلوكوز) . فإن الحساب هو:‎ 
(2+3) + )2+1+0+3( 
=5+6 
= 0.83 
183 أى أن النموذج وصلت نسبة التنبؤات الصحيحة به الى‎ 
لكن هذا المقياس غير دقيق ففى نفس المثال لو أن هناك نسبة محددة من السكان 10 % مصابون بالمرض فيمكن إنشاء‎ 


نموذج يتنبأ دائما ب 0 وسيحقق دقة 90/: على الرغم من أنه لا يقوم بمحاولة حقيقية للتمييز بين المرضى لذا فما نحتاجه 


الاستدعاء أوالاسترجاع Recall‏ : 
هو مقياس يقيس نسبة الحالات الإيجابية التي حددها النموذج بشكل صحيح. أى مقارنة عدد المرضى الذين يعانون من مرض 
السكرء بأعداد الذين توقع النموذج الإصابة بهم. 
دالة الاستدعاء هي: 
TP + (TP+FN)‏ 
وبالتطبيق على SUM‏ السابق: 
)341( + 3 


=3+4 
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0.75= أى أن دقة النموذج تساوى0.75 


Precision الانضباط‎ 


هي مقياس يقيس نسبة الحالات الإيجابية المتوقعة حين تكون التسمية الحقيقية إيجابية بالفعل. وبعبارة أخرىء ما هي نسبة 
المرضى الذين توقعهم النموذج لمرض السكر بالفعل؟ 


دالة الانضباط هي: 


TP = (TP+FP) 


=1.0 


لذا فإن 1100 من المرضى الذين توقعهم نموذجنا لمرض السكري لديم بالفعل مرض السكري. 


درج۴14 : 


هي المتوسط التوافقي للدقة و الاستدعاء. » تعتبر درجة ۴1 مقياس شائع الاستخدام عندما يكون كل من الدقة والاستدعاء 
مهمين يتم حساب درجة ۴1 على النحو التالي: 


(2 x Precision x Recall) + (Precision + Recall) 
= وبالتطبيق على الامثلة السابقة‎ 
(2 x 1.0 x 0.75) + (1.0 +0.75) 
=1.5+1.75 


= 0.86 
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المنطقة تحت المنحنى8000) : 


وتسمى ايضا بالمعدل الإيجابي e (TPR) iial‏ وهناك مقياس مكاف يسىى المعدل الإيجابي الخاطئ (FPR)‏ الذي يتم حسابه 
على النحو FP=(FP+TN) lll‏ 


o o o 
& E e e 


معدل القيم duly!‏ الصحيحة TP‏ 


o 
o 


oo o1 o. 16 


ou o6 
FP Sb! معدل القيمر الإيجايية‎ 


وبتطبيق TPR‏ على نموذجنا عند استخدام حد 0.5 هو 0.75( ويمكننا استخدام صيغة FPR‏ 
0= 2:0 
ويطبيعة الحالء إذا أردنا تغيير الحد الذي يتنب به النموذج أعلاه بالقيمة الحقيقية )1( فإنه سيؤثر على عدد التنبؤات 


الإيجابية والسلبية؛ وبالتالي سيغير مقاييس FPR. 9(TPR)‏ غالبا ما تستخدم هذه المقاييس لتقييم نموذج عن طريق 
رسم منحنى FPR 9 TPR colis eI (ROC).‏ لكل قيمة حد ممكنة بين 0.0 و1.0 


0 01 02 03 04 05 06 07 08 09 1 
FPR 


في UL‏ نموذج مرض السكري لديناء يتم إنتاج المنحنى أعلاهء والمساحة تحت مقياس المنحنى (AUC)‏ 0.875 نظرا لأن 
علاىأعلى من 60.5 يمكننا استنتاج أن أداء النموذج أفضل في التنبؤ بما إذا كان المريض مصابا بالسكري أم لا من التخمين 
NN‏ 


2- التصنيف متعدد الفنات: 


يستخدم التصنيف متعدد الفئات للتنبؤ بفئات متعددة محتملة. كأسلوب تعلم آلي خاضع للإشراف. فإنه يتبع نفس عملية 
التدريب التكراري والتحقق من صحته وتقييمه على أنها تراجع وتصنيف ثنائي حيث يتم الاحتفاظ بمجموعة فرعية من بيانات 
التدريب مرة أخرى للتحقق من صحة النموذج المدرب. تختلف خوارزميات الت لتصنيف متعددة الفئات عن التصنيف الثنائى 
فى انها تستخدم الاحتمال لتسميات فئات متعددة. 

مثال تطبيقى : 


حيث لدينا بعض البيانات الى تعكس UJ‏ انواع القطط . حيث يتم التعرف على نوع القطة من خلال طولها (x)‏ وهناك ثلاثة 
انواع من القظط حسب الأظوال الموجودة ف البيانات ) (Y‏ لتكوت فلك الانوا ع غلى التحو العال: 


0: قط شرق 
1 : قط بیکسی 


2: قط شرازى 


طول القطة النوع 


(Y) (x) 
0 167 
0 172 
2 225 
1 197 
1 189 
2 232 
0 158 
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لكل 22d‏ هناك توعان من الخوارزميات التي يمكن استخدامها للقيام بذلك: 


© خوارزميات(/017) One-vs-Rest‏ 
o‏ خوارزميات متعددة الحدود. 
خوارزميات One-vs-Rest (OvR)‏ 


تقوم خوارزميات One-vs-Rest‏ بتدريب Als‏ تصنيف ثنائي لكل فئةء كل Leo‏ يحسب احتمال أن تكون الملاحظة مثالا على 
الفئةا لمستهدفة. ففى المثال تقوم الخوارزمية بانشاء ثلاث وظائف تصنيف ثنائية: 


تنتج كل خوارزمية دالة sigmoid‏ تحسب قيمة احتمالية بين 0.0 و1.0. Liu‏ النموذج المدرب باستخدام هذا النوع من 
الخوارزمية بفئة الدالة التي تنتج . 
خوارزميات متعددة الحدود 


المحعملة ae‏ درجة الاعتمال لكل ففة (allo‏ هته إجمالها عضيف ما يضل إل 1:0: 


f(x) =[P(y=0|x), P(y=1|x), P(y=2|x)] 
التالي:‎ JULI والتي يمكن أن تنتج إخراجا مثل‎ ssoftmax All مثال على هذا النوع من الدالة هو‎ 
[0.2, 0.3, 0.5] 


تمثل العناصر الموجودة في المتجه احتمالات الفئات 0 و1 و2 على التوالي؛ لذلك في هذه الحالةء الفئة ذات الاحتمال الأعلى 
ھی .2 
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بغض النظر عن نوع الخوارزمية المستخدمةء يستخدم النموذج الدالة الناتجة لتحديد الفئة الأكثر احتمالا لمجموعة معينة 
من الميزات (x)‏ ويتنبأ بتسمية الفئة المقابلة.(ر) 


تقييم نموذج 3 تصنيف متعدد الفئات 


يمكن تقييم التموذج عن طريق حساب مقاييس التضنيف الثناي لكل فنة فردية. أو من خلال حساب المقاييس الإجمالية 


فلو Lisl‏ تحققنا من صحة المصنف متعدد الفئات. وحصلنا على النتائج التالية: 


طول القطط(×) الأنواع الفعلية(ر) الأنواع المتوقعة 
)9( 
165 0 0 
171 0 0 
205 2 1 
195 1 1 
183 1 1 
221 2 2 
214 2 2 


تشبه مصفوفة الارتباك لمصنف متعدد الفئات مصفوفة المصنف الثنائي» باستثناء Lal‏ تعرض عدد التنبؤات لكل مجموعة 
من التسمياتا egil‏ (9)والفئة الفعلية (y)‏ 
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من مصفوفة الارتباك coda‏ يمكننا تحديد المقاييس لكل فئة فردية على النحو التالي: 


FN Fp TN Tp al‏ الدقة -1ع الدقةالاجمالية الاسترجاع 


Score 
1.0 1.0 1.0 1.0 0 | 0 | 5 1 2 | 0 
1.0 0.67 0.8 0.86 0 1 4| 2 1 
0.67 1.0 0.8 0.86 1 0 4 2 2 


لحساب مقاييس الدقة والاستدعاء والدقة الإجمالية. يمكنك استخدام إجمالي مقاييس FN 9FP 3TN 9TP‏ 


= )13+6(+)13+6+1+1( 20.90 الدقة الإجمالية‎ o 
= 6+)6+1( = 0.86 الاستدعاء الإجمالي‎ o 
الدقة0.86-(6+1)+6-‎ e 


يتم حساب درجة ET‏ الإجمالية باستخدام مقاييس الاستدعاء والدقة الإجمالية: 


1 F1 = (2x0.86x0.86)+(0.86+0.86) = إجمالي درجة0.86‎ © 


:Unsupervised machine learning خاضع للاشراف‎ 


على عكس التعلم الموجّهء الآلة تعطى بيانات وتتعلم من نفسها عن طريق محاولة إيجاد أنماط (Patterns)‏ « يتم ذلك عن طريق 
تجميع (Clustering)‏ البيانات التي لدينا إلى مجموعات حسب ما تتشابة فيه. 


مثال على ذلك: عندما يكون لدينا بيانات كثيره عن منازل في مدينة معينةء نقوم بتقسيمها (Clustering)‏ حسب العنوان أو 
الي الذي تتواجد فيه . 
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:( Clustering ) التجميع‎ 


لتجميع هو شكل من أشكال التعلم الآلي غير الخاضع للإشراف حيث يتم تجميع البيانات في مجموعات استنادا إلى أوجه 
التشابه في قيم البيانات أو الميزات الخاصة Le‏ يعتبر هذا النوع من التعلم الآلي غير خاضع للإشراف لأنه لا يستخدم قيم 
التسمية Y)‏ ) المعروفة سابقا لتدريب نموذج. في نموذج تكوين أنظمة المجموعات» تكون التسمية هي المجموعة التي يتم تعيين 
الملاحظة Ll!‏ استنادا فقط إلى ميزاتها. 


مثال : تكوين أنظمة المجموعات 


على سبيل المثال» لنفترض أن عالم النبات يراقب عينة من الزهور ويسجل عدد الأوراق والبتلات على كل زهرة: 


البتلات (x2)‏ عدد الاوراق 
(x1)‏ 

0 

0 

1 


-— 
CO | نيا | ل-‎ cO HD t€ | نيا‎ OC Ui 
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تدريب النموذج : 


هناك العديد من الخوارزميات التي يمكن استخدامها لتكوين أنظمة المجموعات. إحدى AST‏ الخوارزميات استخدامًا هي 
خوارزميات K-Means‏ لتكوين أنظمة المجموعات» وذلك على النحو التالى : 


1. يتم تحوبل قيم الميزة (x)‏ لتحديد إحداثيات الأبعاد n‏ (حيث n‏ هو عدد الميزات). ففي المثال السابقء لدينا 
ميزتان هما عدد الأوراق (x1)‏ وعدد البتلات (x2).‏ لذلك» يحتوي متجه الميزة على إحداثيتين يمكننا 
انعفد اها asy‏ قاط البيانات (iA, x2])‏ 

ote dada 2‏ اللجموعات الف ترمد Leal isl‏ جيم الزهوو ) امعدضاء هذه القيمة 1 )على سيل «JUL‏ 
لإنشاء ثلاث مجموعات. يمكن استخدام قيمة k‏ وهي 3. 

3 يعم ربع قاط al itas d‏ تع qose t] LG bial gin‏ لكل كلام مجموعة ذلك 
تمس aps tl doti‏ 


-6 

Ac 
Qe 
ES 


5 


E 


4 يتم تعيين كل نقطة بيانات )3,25( إلى أقرب مركزية لها. 


Q 


E‏ چ 


3 J> J 


1 
xe 
2d 

8 

e 


o 8 Fe 4 $ 
a \ / 
0 al 2 3 5 6 7 8 


sie x 


iex 5‏ كل Ali‏ مركوة إل مركو ois‏ البيانات المفينة لبا استداذا إلى Magia‏ المسافة بين التعاظ: 
6 تتكرر خطوات الحركة المركزية واعادة تخصيص نظام المجموعة d‏ تصبح المجموعات مستقرة أو يتم 
الوصول إلى الحد الأقصى المحدد مسبقا لعدد التكرارات. 
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تقييم النموذج : 


نظرا لعدم وجود تسمية معروفة لمقارنة تعيينات نظام المجموعة المتوقعة بهاء فإن تقييم النموذج هنا يستند إلى مدى فصل 
المجموعات الناتجة عن بعضها البعض. 


هناك مقاييس متعددة يمكن استخدامها لتقييم فصل نظام المجموعة: منها على سبيل المثال لا الحصر: 


o‏ متوسط المسافة إلى مركز نظام المجموعة :مدى قرب كل نقطة في نظام المجموعة في المتوسط من النقطة 
المركزية للمجموعة. 

o‏ متوسط المسافة إلى مركز آخر :مدى قرب كل نقطة في نظام المجموعة في المتوسط من النقطة المركزية 
لجميع المجموعات الأخرى. 

٠‏ الحد الأقصى للمسافة إلى مركزنظام المجموعة :أبعد مسافة بين نقطة في نظام المجموعة ومركزها. 

© صورة ظلية :قيمة بين -1 و1 وهى نسبة المسافة بين النقاط في نفس المجموعة والنقاط في مجموعات مختلفة 
(كلما اقتربت من 61 كان فصل نظام المجموعة أفضل). 


تخفيض الابعاد :Dimensionality Reduction‏ 
تقليل أو تخفيض الأبعاد هو عملية تقليل عدد الميزات في مجموعة البيانات مع الاحتفاظ بأكبر قدر ممكن من 
البيانات. 


هناك العديد من التقنيات لتقليل الأبعادء Ley‏ في ذلك تحليل المكون (PCA) gus JE‏ « وتحليل القيمة المفردة(5۷0) « والتحليل 
التمييزي الخطي (LDA).‏ تستخدم كل تقنية طريقة مختلفة لعرض SLL‏ على مساحة SIS‏ أبعاد أقل مع الحفاظ على 
المعلومات المهمة. 
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هناك طريقتان رئيسيتان لتقليل الأبعاد: 

اختيارالميزة: 

يتضمن اختيار الميزة تحديد مجموعة فرعية من الميزات الأصلية الأكثر صلة بالمشكلة المطروحة .الهمدف هو تقليل أبعاد 
مجموعة البيانات مع الاحتفاظ بالميزات الأكثر أهمية .هناك عدة طرق لاختيار الميزةء منها التصفية:ء و التغليف» والأساليب 
المضمنة. 

التصفية : تقوم طرق التصفية بترتيب الميزات tly‏ على مدى صلتها بالمتغير المستهدف 

التغليف : تستخدم طرق التغليف أداء النموذج كمعيار لاختيار الميزات. 

استخرا c‏ الميزات: 

يتضمن استخراج الميزات إنشاء ميزات جديدة من خلال دمج الميزات الأصلية أو تحويلها cà. dl.‏ هو إنشاء مجموعة من 
الميزات التي تجسد جوهر البيانات الأصلية à‏ مساحة ذات أبعاد أقل .هناك عدة طرق لاستخراج cos‏ منها تحليل المكون 
الرئيسي (PCA)‏ » والتحليل التمييزي الخطي (LDA)‏ > وتضمين الجوار العشوائي الموزع (t-SNE). PCA‏ . 

مثال لتخفيض الأبعاد : 

يمكن مناقشة مثال لتقليل الأبعاد من خلال مشكلة تصنيف البريد الإلكتروني البسيطةء حيث نحتاج إلى تصنيف ما إذا كان 
البريد الإلكتروني بريدًا عشوائيًا أم لا .يمكن أن يتضمن ذلك عددًا Bus‏ من الميزات» مثل هل البريد الإلكتروني له عنوان عام 
أم لاء ومحتوى البريد الإلكتروني» وما إذا كان البريد الإلكتروني يستخدم قالبًاء وما إلى ذلك. ومع ذلك» قد تتداخل بعض هذه 
الميزات . فيمكننا تقليل عدد الميزات à‏ مثل هذه المشاكل. 
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الفصل الثانى :خوارزميات تعلم الالة 
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خوارزميات تعلم ET‏ 


تعد خوارزميات تعلم الآلة أداة قوية للتعامل مع تحليل البيانات واستخراج الأنماط الضخمة وتحسين القرارات في مجموعة 
متنوعة من المجالات وهناك العديد من الانواع المختلفة لخوارزميات تعلم الآلة وفقاً لنوع تعلم الالة المستخدم وذلك على 
النحو الموضح بالشكل أدناه 


Gaussian Mixtures 


K-Means Clustering 


Boosting 


K- Nearest Neighbor Linear Regression 


Hierarchical Clustering 


Support Vector Regression 


Naive Bayes 


Spectral Clustering 


Decision Trees 


Decision Trees 


Support Vector Machine Gaussian Progresses Regression 


Logistic Regression Ensemble Methods 


شجرة اختيار الخوارزمية هي طريقة توجيهية تستخدم لاختيار الخوارزمية المناسبة لمشكلة معينة في مجال التعلم الآلي. 
دُستخدم هذه الشجرة لتوجيه المهندس أو المُطور إلى الخوارزمية الأنسب استنادًا إلى خصائص المشكلة والبيانات. وفيما يلى 
شرحًا لكيفية استخدام شجرة اختيار الخوارزمية: 


الخطوة الأول: تحديد نوع المشكلة التي نحاول حلباء مثل التصنيف. أو &ixll‏ « أو التجميع, إلخ. 
الخطوة الثانية: تحليل خصائص البيانات المتاحةء مثل حجمهاء ونوعها (رقمي. تصنيفي» إلخ)ء وتوزيعها. 
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الخطوة الثالثة: اختيار المعيار الأسامي بناءً على نوع المشكلة وخصائص البيانات» يتم اختيار المعيار الأسامي للتقييم» مثل 
الدقةء أو المتوسط الحسابي للخطأء أو معامل F1.‏ 

الخطوة الرابعة: اختيار الخوارزمية المبدئية المناسبة استنادًا إلى المعيار الأسامي المحدد. 

الخطوة الخامسة: تقييم الخوارزميات المبدئية باستخدام المعيار الأسامي المحدد. 

الخطوة السادسة: اختيار الخوارزمية النهائية التي تحقق أفضل أداء fla‏ على التقييم. 

. الخطوة السابعة: تحسين وتعديل الخوارزمية المختارة عن طريق تعديل معلماتها أو تطبيق تقنيات تحسين الأداء. 

الخطوة الثامنة: التحقق والتقييم النهائي حيث يتم التحقق من أداء الخوارزمية المحسنة على بيانات اختبار مستقلة وتقييم 
أدائها النهائي. 


من خلال هذه الخطوات» يمكن للمُطورين أو المندسين في مجال التعلم JY‏ اختيار وتحسين الخوارزمية المناسبة بشكل 
فعّال لحل المشكلة المعينة. 


classification scikit-learn 
algorithm cheat-sheet 


dimensionality 
reduction 
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Logistic Regression (as 9I الانحدار‎ -1 


إحدى خوارزميّات elsi‏ الآلة و أشهر خوارزميّات التصنيف (Classification)‏ وتستخدم لتصنيف البيانات إلى فئات (Classes)‏ 
منفصلة والانحدار اللوجستي هو انحدار يعتمد على الدالة السينية (Sigmoid Function)‏ ونواتجها تنحصر بين الصفر 
والواحد. 


1 
1+e-* 


S(x) = 


خوارزمية الانحدار اللوجستي تقسم البيانات إلى مجموعتين متناقضتين ولا ينفع استخدام هذه الخوارزمية إلا إذا كانت 


Logistic Regression 


الانحدار اللوجستي 


k-Nearest Neighbors1 3! خوارزميّة الجار‎ -2 


© تعتبر خوارزميّة الجار الأقرب من خوارزميّات تعلّم الآلة ضمن مجموعة التعلّم تحت إشراف» والتي تعد “من أبسط 


الخوارزميّات نظراً لسبولة استخدامها واستهلاكها للقليل من الوقت. 


02 


Nein aa a5 بيانات‎ ue لآق خوارزيقة الجار الأقري تعمل عل‎ LS ly تدرب‎ oaa Tib 


تنتقل خوارزميّة الجار الأقرب KNN‏ عبر مجموعة البيانات بأكملها للعثور على أقرب مثيلات k‏ إلى العنصر الجديد 


قيمةا يحدّدها المستخدم. 


يتمّ حساب التّشابه بين الحالات باستخدام مقاييس مثل مقياس المسافة الإقليديّة ومسافة هامينج. 


كيفية عمل خوارزمية الجار KNN SSH‏ 
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mi 


K Nearest Neighbour 
k الجار القريب من القيمة‎ 


تم قياس المسافات بين كل قيمة من قيم c K‏ عن طريق معادلات المسافة الرباضيةء وأشهر معادلة قياس مسافة هي معادلة 
المسافة (Eucliean Distance). ALY‏ 


d(y,x) = (Y1 — x1)? + (y2 - x2)? + ... (Yn - Xn)? 


| n 
= 32 - × 
iz1 


دالة المسافة الإقليدية 


تقيس الدالة الإقليدية المسافة بين نقطتين. حيث أن و © هما مجموعتين مختلفتين» pig‏ تطبيق هذا القانون على جميع 
النقاط في العينة لنرى أي نقطة أقرب لكل مجموعة على اعتقاد أن المجموعة الأولى هي K=1‏ أو المجموعة äl‏ والمجموعة 
الثانية هي K=2‏ أو المجموعة el‏ 


ولكن ستواجهنا مشكلة وهي أنه ستكون هنالك قيم ستكون بعيدة عن جميع المجموعات ولذلك سنلجأ لخوارزمية SVM‏ لحل 
هذه المشكلة. 
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3- خوارزميّة المصتف البايزي الساذج Naive Bayes classifier‏ 


هي طريقة تصنيف تعتمد على نظريّة بايزء Naive Bayes gas‏ خوارزميّة شاقة LEY‏ تتطلّب معرفة رياضيّة أوليّة في الاحتمال 
الشرطيّ و نظريّة بايز ESI‏ كمفهوم سهلة للغاية . 


بفرض لدينا المتغيّر × الذي يعبّر عن شخص سيلعب كرة قدم flu‏ على حالة الطّقسء لدينا حالات الطّقس وأمام US‏ حالة 
المتغيّر المدف الذي سيأخذ نعم سيلعب أو لا . 


هناك ثلاث خطوات لتجهيز الخوارزميّة للتنبّؤ فيما إذا كان X‏ سيلعب أولا. 


جمع البيانات 2 حساب جدول التكرار- حساب جدول الاحتمالات 


[No | ves | 

[Overcast | — | 4 | ais | 029 | 

Rainy | 3 | 2 | sns] ose | 

sunny | 2 | 3 [sna] ose | 
pan we 


[ 036 | oss | 


«nay oie‏ جدول التكرار 


بعد ذلك نستخدم معادلة Naive Bayesian‏ لحساب احتمال حدوث «(Class)àà US‏ في مثالنا هناك فئتان (Yes/No)‏ 
والاحتمال الأعلى هو نتيجة Sis]‏ 
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فئة الاحتمال المسبق احتمالية 


NJ 
si.) لكات‎ 
| P(x) " 


توقع الاحتمال المسبق الاحتمال المعاكس 


P(c|X) = P(x, | c) x P(x, | c)x---x P(x,|e)x P(e) 


لنختبر الفرضيّة التالية X eala (Hypothesis):‏ إذا كان الطقس مشمساًء هل هذه الفرضيّة صحيحة؟ نحتاج إلى حساب 


حدوث نعم (01355)مع خاصيّة (Feature). wore‏ 


(مشمس) Pani) / P‏ * (نعم | مشمس )۴ = (مشمس | Pham‏ 


بالتجوع إلى جدول الاحتمالات نجد 


المطلوب حساب P (yes | sunny)‏ 
احتمالية أن تكون (نعم) مع خاصية (مشمس) 
يسضى أنه سيلعب أحمد إن كان الطقس مشمس 


P(sunny) = 0.36 


P(sunny | yes) = 3 /'9 


P (sunny | yes) =0.33 
P (yes) =0.64 
P (sunny) 6 


ونتيجة المعادلة 0.59 لذا OL‏ الفرضِييّة صحيحة. 
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مثال أخر لاستخدامها فى رسائل البريد الالكترونى غير المرغوب فما 


Tag علو ره‎ S ل اا ا‎ ed يها‎ TN 
x " ' عيّنة التدريب‎ 7 
1 استخدا‎ i r 
stat شال‎ i gies RR: 
١ " E 
1 
Í eru. qu SSBB: 
LU 
4/12» ل(ت)‎ 
— Oe: 
ere ee 30 r 
| ل(ع)؛دالة احتمال وقوع حادث‎ ١ — | UV 7 عن‎ B [zs] [zs] ; 
‘ 
, ع : رسالة عادية‎ 1 ١ ea ' 
i تدرسالةتصهّد‎ ١ ا‎ 1 
Sana udis M OCCULTE IOS UCNEN S E O 
"epic Sach a E ti CL eee a E E 
¦ ل(عزيزي ات)»2/7‎ €«--------.. |o9/U-(l للعزيزي‎ <----- - -B 3 
MULT N | 8797 لرصديقي اع‎ > 7. B 
١ i : 
! |اتغ)»9/7‎ shat > > A £78 i t ل‎ sady ~~. x 2 , 
^ LU 00 L 
| 4/7a(o) »À © 7. 75 ١ $ Wale] لاتقود‎ < ١ 8 ® 
: ^u Ya i ry 8B © B : 
i ١ @ 5 ws [ NE l 8 E E 
' - ها‎ | 10088 3 B o D HU | 
' ai sht صديقي‎ ghje | We aim 


m S 0 pO eI Se STR 
إذا جائتنا رسالة تحتوي على “صديقي العزيز"‎ 
" _ - - - +4 ونريد تصنيفها إلى رسالة عادية او رسالة تصيّد نقوم‎ 
ML e _ _ _ _ حساب احتمال انتماء الرسالة إلى الرسائل العادية:  ۔‎ -1 
"x  )عا|يزيزع(ل‎ x (El ل (صديقي‎ x ل(ع)‎ 


0.00 = (8/17) x (5/17) x (8/12) 


و 2- حساب احتمال انتماء الرسالة إلى رسائل التصيّد: 

xy ---.. © _.“‏ ل(صديقيات) x‏ ل(عزيزيات) 

0.01 = (2/7) x A/N x )4/12 š ae 

1 
حر 
å N Fan!‏ 
3- بما أن احتمال انتماء الرسالة إلى الرسائل العادية _ _ Wo ae‏ 

أكبر من احتمال انتمثها إلى رسائل التصيّد E — 7^ pinu‏ 


ارسال الرسالة إلى صندوق الوارد. 


١ 
r 
ee ال اث‎ ee الك ال ا ا‎ ee ee ا ا ا ا ل ال‎ © 


A um c m c ال ا ا ل ا ال ا‎ wees AP ال ل ا ل ا‎ ese es ا ال ل‎ we ا‎ mm od 
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Support Vector Machineaocl J} خوارزميّة المتجبات‎ -4 


إحدى خوارزميّات التعلّم تحت إشراف (Supervised Learning)‏ التي يمكن استخدامها في التصنيف (Classification)‏ 
baleg (Regression) j|. xls‏ تستخدم في التصنيف لفعاليتها وحصولها على دقة ممتازة في أغلب البيانات المستخدمة . 


خوارزميّة آلة المتجهات الدّاعمة 101/ا5مبنيّة على فكرة إيجاد مستو فائق (hyperplane)‏ يقوم بتقسيم مجموعة البيانات إلى 
صنفين بأفضل طريقة كما هو موضّح في الشكل أدناه. 


عمل خوارزميّة المتجهات الدّاعمة101/ا5 


5- شجرة القرارعع:! Decision‏ 


شجرة القرار هي شجرة ثنائيّة (binary tree)‏ وهذا يعني cR Si‏ أب ولدين على الأكثر. حيث أن كلّ عقدة (node)‏ الشجرة 
Das‏ متغيراً Leu (variable)‏ أوراق الشجرة (leaf nodes)‏ تمثل التتيجة uai (output)‏ تستخدم للتنبّؤ. 
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80kg‏ > الوزن 


عمل أشجار القرار 


Random Forestal الغابات العشو‎ -6 


هي عبارة عن تحسين على أشجار (Decision Tree) bal‏ تسعى بالغابة العشوائيّة, وكما يوحي اسمها wd‏ تتكوّن من عدد 
كبير من أشجار القرار الفرديّة التي تعمل كمجموعة للحصول على تنبّؤات أكثر دقة واستقراراً. 


من نتائج $15 هذه المجموعة يتمّ الحصول على أعلى نتيجة تصويت » وهي أفضل من نتيجة استخدام أفضل نموذج بمفرده . 


0 ( Ó C 
Pi(clf) P, (elf) 


| P(clf) = T n 


عمل الغابات العشوائيّة 


Regression 


Linear Regression الانحدارالخط‎ -1 


O‏ يعتبر من أبسط الخوارزميّات ضمن فئة التعلّم تحت الإشراف (Supervised Learning)‏ الذي يقوم بنمذجة 


© تستخدم في تفسير متغيّر لاعبر fais‏ آخر × أو مجموعة من المتغييّرات X1,X2,...XP)‏ ) وفق able‏ خطيّة . 


. بالتابع‎ Y المتغيّر‎ sca e 


(mado ©‏ المتغيّرات × بالمتغيّرات المستقلّة أو المفسّرة بمعنى LEÍ‏ تفسّر تغيّرات المتغيّر التابع./ا 


Linear Regression Jal الانحدار‎ 


ففي الشكل أعلاه يوضّح علاقة خطيّة بسيطة بين متغيّرين المتغير (X).‏ والمتغيّر (Y)‏ التّقاط تمثّل البيانات . والخط الأحمر 
dia‏ الانحدار الخطيّ الذي سيقوم بالتنبّؤ لمقدار لاحسب *؛ أي نتيجة التنبّؤ تكون قيماً مستمرّة Continuous Values.‏ 
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Gaussian Progresses Regression- 2 


العمليات الغوسية (GP)‏ هي خوارزمية تعلم خاضعة للإشراف تستخدم لحل مشاكل الانحدار والتصنيف الاحتمالي . فتعتبر 
العمليات الغاوسية أداة قوية في صندوق أدوات التعلم الآلي حيث Lél‏ تسمح بعمل تنبؤات حول بياناتنا من خلال دمج المعرفة 
السابقة. وأكثر مجالات التطبيق وضوحا هو ملاءمة وظيفة للبيانات» حيث Gud‏ هذا بالانحدار ويستخدم في 
علم الروبوتات أو التنبؤ بالسلاسل الزمنيةء لكن العمليات الغاوسية لا تقتصر على الانحدار بل يمكن أيضاً توسيعها لتشمل 
مهام التصنيف والتكتل. 


ما هي عمليات غglسProcessùj Gaussian‏ $ 

عمليات غاوسين (Gaussian Process):‏ هي طريقة جديدة للتعلم JYI‏ تعتمد على نظرية pb‏ ونظرية التعلم الإحصائي حيث 
يوفر إطاراً مرناً للانحدار الاحتمالي ويستخدم على نطاق واسع لحل مشكلات الانحدار عالية الأبعاد أو العينات الصغيرة أو 
غير الخطية. يحدد (GP)‏ التوزيع على الوظائف حيث أنّ (GPs)‏ هي امتداد لنموذج (Gaussian)‏ متعدد المتغيرات إلى المتجه 
SLAW!‏ للمتغيرات ذات القيمة الحقيقية حيث يتم تحديد (GP)‏ تماماً بواسطة دالة متوسطة ودالة تغاير. 


— Gaussian Process:(ywolé خصائص عمليات‎ 


(Normalization).&4laxl .1 
(Marginalization). ġġ) .2 
(Summation). asosi) .3 
(Conditioning). żyd .4 


تُستخدم العمليات الغاوسية عادةً لتوصيف مكون الضوضاء في أنظمة الاتصالات الرقميةء نظراً LEY‏ ناتجة بشكل أساسي 
عن تقلبات الضوضاء الحراريةء تم وصفها على LT‏ تقنية تقدير غير خطية في عام 1978م وتم نسيانها بسرعة بسبب تعقيدها 
الحسابيء Lal‏ في منتصف التسعينيات أعيد اكتشافها بشكل مستقل منذ ذلك الحين ثبت LET‏ تناسب العديد من التطبيقات 
المختلفة. Lal‏ في الوقت الحاضر لم يعد تعقيدها الحسابي مشكلة مقيدة» 


قدمت عمليات (Gaussian)‏ للتعلم الآلي كأداة غير خطية جديدة لتصميم مستقبلات الاتصالات الرقميةء كما يمكن تطبيق 
عمليات (Gaussian)‏ على مشاكل الانحدار والتصنيف لضبط مستقبلات الاتصالات الرقمية بتسلسلات تدريب قصيرةء حيث 
يتم مقارنة عمليات غاوسين للانحدار (GPR)‏ وعمليات غاوسين للتصنيف (GPC)‏ بأحدث المستقبلات الخطية وغير الخطية 
bY‏ قوتها في حل هذه المشكال. 


عمليات غglس Gaussian Processes for Regression: j|. i‏ 
تم تطوير أداة بايزية جديدة للتعلم JYI‏ تعتمد على العمليات الغاوسية (GPs)‏ لتقدير الانحدار غير الخطي. حيث تفترض 
عمليات غاوس للانحدار (GPR)‏ على (GP) Gi‏ يتحكم في مجموعة الانحدارات المحتملةء وبالتالي يتم إعطاء التوزيع المشترك 
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لبيانات التدريب والاختبار بواسطة دالة كثافة (multidimensional Gaussian)‏ ويتم تقدير التوزيع المتوقع لكل نقطة اختبار 
عن طريق التكييف على بيانات التدريب» تقدم (GPR)‏ من وجهة نظر الانحدار الخطي المعمم بايزي» وعلى الرغم من أنه يتم 
فقد من هذا الافتتاح تفسير (GPs)‏ ولا يمكن العمل إلا مع نماذج الاحتمالية الغاوسية» إلا Lél‏ طريقة أبسط (GPR). eeil‏ 


عمليات غاوسية Gaussian process for classification: -ishal‏ 
عملية غاوسي للتصنيف أصعب قليلاً من نظير الانحدارء لأثه لا يتم الاعتماد على دالة الاحتمال الغاوسي للتنبؤ بتسميات كل 


نواة عملية Gaussian process kernels: cyw9lé‏ 
دالة النواة (Kernel function):‏ تصف النواة أو “دالة التغاير” التغاير في المتغيرات العشوائية لعملية غاوسي جنباً إلى جنب 
مع الوظيفة المتوسطة حيث تحدد النواة تماماً العملية الغاوسية. 


نظربة الحد المركزي Gaussian: us‏ 
نظرية الحدود المركزية (Central Limit Theorem):‏ هي نتيجة مهمة وركيزة في مجالات الإحصاء والاحتمالات. وتنص النظرية 
على أنه كلما زاد حجم العينة OB‏ توزيع المتوسط عبر عينات متعددة سيقارب التوزيع الغومي. 


آلية أخذ العينات في نظرية الحد المركزي Gaussian: ue‏ 
تعد نظرية الحد المركزي مثيرة للإعجاب» old‏ وأنّ هذا سيحدث بغض النظر عن شكل التوزيع الذي نستمد منه العينات 
حيث di)‏ يوضع أنّ توزيع الأخطاء من تقدير المجموعة يعني أنّه يتناسب مع التوزيع الذي يعرفه مجال الإحصاء كثيراً. 


سيكون تقدير التوزيع الغاوسي أكثر دقة مع زيادة حجم العينات المأخوذة من المجموعةء liag‏ يعني أنه إذا استخدمنا معرفتنا 
بالتوزدع الغاوسي بشكل عام للبدء à‏ إجراء استنتاجات حول وسائل العينات المأخوذة من المجموعات» ol‏ هذه الاستنتاجات 


أحد التداعيات المثيرة للاهتمام لنظرية الحد المركزي هو Ail‏ يمكن استخدامها لتوليد أرقام عشوائية غاوسية. كما يمكن 
إنشاء أعداد صحيحة عشوائية بشكل منتظم ومجموعات مجموع منها معاً حيث ستكون نتائج المجاميع غاوسية, وأنّ المتوسط 
هو مجرد المجموع الطبيعي للعينة وعد هذه الطريقة Leb‏ طريقة أبطأ لتوليد متغيرات جاوس العشوائية مقارنة بالطرق الأخرى 
Jis‏ طريقة()ع|ادالا — (Box‏ ولکتها تطبيق واضح وذكي للنظرية. 


تقترح عمليات (Gaussian)‏ كجهاز استقبال غير خطي جديد لأنظمة الاتصالات الرقميةء كما يمكن استخدام إطار عمل 

(675)لحل مشاكل التصنيف (GPC)‏ والانحدار(671) e‏ وكذلك الحد الأدنى لمتوسط حل الخطأ التربيعي وهو توقع الرمز 
المرسل في ضوء المعلومات الموجودة في المستقبل. وهي وظيفة غير خطية للرموز المستقبلة للمدخلات المنفصلة»ء كما يمكن 
تقديم (GPR)‏ كمقدر (MMSE)‏ غير خطي وبالتالي قادر على تحقيق الأداء الأمثل من وجهة (MMSE). pbs‏ 
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ويمكن النظر إلى تصميم مستقبلات الاتصالات الرقمية على أنه مشكلة اكتشاف. تناسب (GPC)‏ بشكل خاص LEY‏ تعين 
الاحتمالات اللاحقة لكل رمز مرسلء. وعمليات (Gaussian)‏ هي أدوات التعلم (Bayesian) JY!‏ التي تصوغ Als‏ الاحتمال 
لمعلماتها الفائقة والتي يمكن بعد ذلك ضبطہا على النحو الأمثل. 


وبالنسبة لمجموعة معينة من نقاط التدريب من المحتمل أن يكون هناك عدد لا نهائي من الوظائف التي تناسب البيانات حيث 
تقدم عمليات Se (Gaussian)‏ أنيقاً لهذه المشكلة عن طريق تعيين احتمال لكل من هذه الوظائف ثم يمثل متوسط توزيع 
الاحتمالات هذا التوصيف الأكثر احتمالية للبيانات. علاوة على ذلك يتيح لنا استخدام نهج احتمالي لدمج ثقة التنبؤ في نتيجة 


Support Vector Regression - 3 


خوارزمية انحدار المتجة الداعم (SVR)‏ هي خوارزمية تعلم آلي نُستخدم لتحليل الانحدار ‏ والتي تتضمن التنبؤ بالقيم العددية 
المستمرة. أيضا هي تندرج تحت خوارزمية آلة المتجبات الدعمة (SVM)‏ « الخوارزمية المعروفة الاستخدام لهام التصنيف و 
التنبق. 


في خوارزمية انحدار المتجه الداعم » الهدف هو ملاءمة خط الانحدار الذي يفصل البيانات على أفضل وجه إلى فئتين » حيث 
تمثل إحدى الفتات المتغير المستهدف » بينما تمثل الفئة الأخرى الأخطاء المتبقية. يمثل خط الانحدار هذا المستوى الفائق 
الذي يزيد الهامش بين المتغير الهدف والأخطاء المتبقية. يتم تعريف الهامش على أنه المسافة بين المستوى الفائق وأقرب نقاط 
البيانات » والمعروفة باسم متجهات الدعم. التعامل مع العلاقات غير الخطية بين المتغيرات المستقلة والتابعة ويمكها أيضًا 
التعامل مع القيم المتطرفة بشكل Sled‏ هذا dam‏ خوارزمية انحدار متجة الدعم مفيدة لمهام التنبؤ المختلفة » مثل التنبؤ 
بأسعار الأسهم ‏ والتنبؤ بالطقس. باختصار »تعتبر خوارزمية انحدار متجه الدعم خوارزمية تعلم آلي قوية ومرنة » خاصةً 
عندما تحتوي البيانات على علاقة غير خطية أو قيم متطرفة. 


كيف تعمل خوارزمية انحدارالمتجه الداعم؟ 

bales‏ خوارزمية انحدار المتجه الداعم على جميع الخصائص المثيرة للاهتمام في خوارزمية آلة المتجبات الداعمة. بحيث يتم 
استخدام نفس المبادئ التي يتم استخدامها في خوارزمية ألة المتجهات الداعمة للتصنيف» مع بعض الاختلافات الطفيفة. 
استنادا إلى البيانات المدرجة, فإن هذه الطريقة تحاول إيجاد منحنى. ومع ذلك » فبدلاً من أن يكون المنحنى بمثابة حدود للقرار 
في مسألة التصنيف. في خوارزمية انحدار المتجه الداعم SVR‏ يتم ايجاد تطابق بين بعض المتجهات والموضع على المنحنى. ومع 
ذلك » فإن الفكرة الرئيسية هي تقليل نسبة الخطأ في النتائج» وتخصيص المستوى الفائق الذي يزيد من قيمة الهامش إلى 


التشابه بين SVR 9SVM‏ 
خوارزمية انحدار المتجه الداعم SVR‏ تشارك خوارزمية المتجبات الدعمة SVM‏ في إيجاد أقرب تطابق بين نقاط البيانات 
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المنحنى الفعلي )5155 لوجود بعض الاخطاء دائمًا في العينات الإحصائية). ويترتب على ذلك Gayl‏ أنه يمكننا التخلص من جميع 
المتجهات التي ليست متجهات داعمةء لسبب بسيط هو lef‏ من المحتمل أن تكون قيم إحصائية متطرفة. 


النواة Kernal‏ و خوارزمية انحدارالمتجه SVRecl as!‏ 

يمكنن تطبيق طريقة النواة في خوارزمية انحدار المتجه الداعم SVR‏ أيضا. وبالتالي» من الممكن معالجة انحدار أي دالة غير 
Aas‏ أو منحنى باستخدام خوارزمية انحدار المتجه الداعم SVR.‏ و بالمثل» يتم تعيين البيانات غير الخطية على مساحة 
تجعل البيانات خطية. في حالة خوارزمية انحدار المتجه الداعم 5۷۸ Y.‏ يلزم أن تكون خطية من أجل فصل مجموعتين » بل 
لتمثيل خط مستقيم وبالتالي حساب مساهمة متجهات الدعم في مسألة التنبؤ. 


أنواع خوارزمية انحدارالمتجه الداعم 5۷۸ 
هناك عدة أنواع من خوارزمية انحدار المتجه الداعم lelu SVR‏ على نوع النواة المستخدمة لنمذجة العلاقة بين المتغيرات » 
منها: 


انحدار المتجه الداعم ذو النواة الخطية: يستخدم هذا التوع من خوارزمية انحداز المنجه الداغم نواة خطية 
لنمذجة العلاقة بين المتغيرات. 

اتحدار المتجه الداعم ذو الثواة متعدد الحدود: يستخدم هذا النوع من اتحدار المتجه الداعم نواة متعددة الحدود 
لنمذجة العلاقة غير الخطية بين المتغيرات. 

انحدار المتجه الداعم ذو نواة دالة الأساس الشعاعي (RBF):‏ يستخدم هذا النوع من انحدار المتجه الداعم نواة 
دالة الأساس الشعاعي لنمذجة العلاقة غير الخطية بين المتغيرات .دالة الأساس الشعاعي هي واحدة من أكثر النوى 
شيوعا المستخدمة في انحدار المتجه الداعم. 

انخداز المنجة الداعم ذو Als Bs‏ سيجهويد prety:‏ هذا التو من اتحدار المتجه الداعم تواة دالة سيجمويك 
لنمذجة العلاقة غير الخطية بين المتغيرات. 

انحدار المتجه الداعم ذو نواة الشبكة العصبية ANN:‏ يستخدم هذا النوع من انحدار المتجه الداعم الشبكات 
العصبية الاصطناعية لنمذجة العلاقة بين المتغيرات. 

لكل خواة من حو :تداز Solas eld dahl‏ 898 و تعاظ كبعف ونين gles!‏ النواة المنامية على طبيعة البياناك 
والمشكلة التي يتم حلها. 


في معظم نماذج الانحدار الخطي البسيط » يكون الهدف الرئيسي هو تقليل نسبة الخطاء. اذا أخذنا المريعات الصغرى 
الخطية OLS‏ على سبيل SUL!‏ إن دالة Sad!‏ ل015 مع ميزة أو خاصية واحدة يمكن وصفها كالتالي: 


n 
MIN 20 — wix;)* 
i=1 


حيث yi‏ هو البدف .9 ga W‏ معامل الوزن > و PX‏ الميزة او الخاصية. 
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Linear Regression Prediction 


House Price (Thousands of Dollars) 


# of Rooms 


يمنحنا انحدار المتجه الداعم المرونة لتحديد مقدار الخطأ المقبول في النموذج الذي نعمل عليه وسيجد Ís‏ مناسبًا (أو 
سطحًا sli‏ بأبعاد أعلى) لملاءمة البيانات. 


رسم توضيي لاتحدار المتجه الداعم SVR‏ البسيط 
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يمكن تجربة طريقة انحدار المتجه الداعم SVR‏ البسيط في مجموعة بيانات اسعار GLA‏ فى منطقة ما . يوضح lala All‏ 
أدناه نتائج نموذج انحدار المتجه الداعم SVR‏ البسيط المدرب على بيانات أسعار الإسكان في المدينة. الخط الأحمر يمثل 
الخط الأكثر ملاءمة والخطوط السوداء تمثل هامش الخطأ . € الذي قمنا بتعيينه إلى 5 )5000 دولار). 


SVR Prediction 


House Price (Thousands of Dollars) 


توقع انحدار المتجه الداعم SVR‏ لأسعار المبانى في بوسطن مع قيمة € تساوي 5 
دالة الفقد مع متغيرات الركود 
قد تدرك بسرعة أن هذه الخوارزمية لا تعمل مع جميع نقاط البيانات. حلت الخوارزمية دالة Sid‏ بأفضل طريقة ممكنة 
ولكن بعض النقاط لا تزال تقع خارج الهوامش. على هذا النحو » نحتاج إلى حساب احتمال أخطاء أكبر من .€ يمكننا القيام 
بذلك مع متغيرات الركود .مفيوم متغيرات الركود بسيط: بالنسبة لأي قيمة تقع خارج €« يمكننا أن نشير إلى انحرافها عن 
الامش GS‏ نحن نعلم أن هذه الانحرافات وجودها معقول » ولكننا ما زلنا نرغب في تقليلها قدر الإمكان. وبالتالي » يمكننا 
إضافة هذه الانحرافات إلى الدالة الموضوعية أو دالة الفقد. 


Minimizeusall alo 


d. - 
MIN 5 ||| + cX Im 
iz1 


Constraintss. Lal 
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lyi e W;X; | <é+ m 


انحدار المتجه الداعم SVR‏ مع متغيرات Slacks gS Jl‏ 
لدينا OY!‏ مستوى فائق إضافي «C‏ يمكن ضبطه. كلما زادت قيمة المستوى C‏ . زادت احتمالية وجود النقاط خارج حدود € 
أيضًا. مع اقتراب © من 0 6 يقترب الاحتمال من 0 وتنهار المعادلة إلى المعادلة المبسطة (على الرغم من Lel‏ غير ممكنة في بعض 
الأحيان). 


دعونا نضع قيمة 1.0 C=‏ ونعيد تدريب النموذج أعلاه. تم رسم النتائج أدناه: 
عونا نضع رد c‏ عد ود oo‏ 
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SVR Prediction 


5 5 


5 


House Price (Thousands of Dollars) 


10 


3t of Rooms 


توقع انحدار المتجه الداعم SVR‏ لأسعار المباتى مع5 - © C210.‏ 


إيجاد أفضل قيمة ل) 

يبدو أن النموذج أعلاه قلل نسبة الخطأ نسبيا و أعطى نتائج أفضل من سابقه. يمكننا أن نخطو خطوة أخرى ونبحث على 

قيمة اخرى ل © للحصول على حل أفضل. لنفترض أن مقياس التقييم سيكون Within Epsilon96.‏ يقيس هذا التقييم عدد 
النقاط الإجمالية ضمن مجموعة الاختبار التي تقع ضمن هامش الخطأ. يمكننا أيضًا مراقبة كيفية اختلاف متوسط الخطأ 
المطلق (MAE)‏ مع قيمة © أيضًا. 


3 oc 58 
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ايجاد قيمة C‏ المثالية بناءا على قيمة within Epsilon%‏ 9 متوسط الخطأ المطلق (MAE)‏ 
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كما نرى » تقل نسبة الخطأ MAE‏ بشكل عام مع زيادة قيمة C.‏ ومع ذلك » نرى الحد الأقصى يحدث في تقييم within‏ 
Epsilon%.‏ و نظرًا لأن هدفنا الأصلي من هذا النموذج كان زيادة التنبؤ ضمن هامش الخطأ الذي حددناه )5000 دولار أمريكي) 
> فإننا نريد ايجاد قيمة C‏ التي تكون عندها قيمة within Epsilon%‏ قصوى. وبالتالي قيمة C‏ في هذه الحالة تساوي تقريبا 
3 بناءا على هذه القيمة نبني نموذجًا أخيرًا باستخدام العوامل الفائقة الهائية » 5 - 6 , .6.13 =) 


يظهر الرسم البياني أعلاه أن هذا النموذج قد تحسن كثيرا مقارنة بالنماذج السابقة . كما هو متوقع. 


SVR Prediction 


House Price (Thousands of Dollars) 


# of Rooms 


توقع انحدار المتجه الداعم SVR‏ لأسعار UL‏ مع5 =€ < C=6.13‏ 
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Ensemble Methods - 4 


هي تقنية للتعلم Jl‏ تجمع بين عدة نماذج أساسية لإنتاج نموذج تنبؤي واحد مثالي e à.‏ هذا التعريف بشكل أفضل» 
دعونا نعود خطوة إلى الهدف النهائي المتمثل في التعلم الآلي cling‏ النماذج. سيكون هذا SÍ‏ منطقية عندما أتعمق في أمثلة 
محددة ولماذا يتم استخدام أساليب.ء اطامرعدومع 


(ASG و الك من ال‎ dae cd Lal ج ار‎ o ك‎ aal الع يدوو اررق‎ eat gal ws 


Dependent variable: PLAY 


Play 9 
Don't Play 5 


Don't Play 2 Don't Play 0 


Play 2 Play 0 
Don't Play 0 Don't Play 3 


autos‏ شجرة القرار القيمة التتبوية de Sle,‏ سلسلة مق الأسغلة Leg llo‏ هال سبل الخال خد شهجرة القران البسيظة 
هذه ما إذا كان يجب على الفرد اللعب في الخارج al‏ لا. تأخذ الشجرة عدة عوامل مناخية بعين الاعتبارء ونظرًا لكل عامل lal‏ 
أنها تتخذ قرارًا أو تطرح سؤالاً آخر. في هذا المثالء في كل مرة يكون الجو ملبدا بالغيوم» سنلعب في الخارج. لكن إذا نزل المطر 
يجب أن نسأل هل الجو عاصف al‏ لا؟ إذا كانت الرياح عاصفةء فلن تلعب. ولكن في حالة عدم وجود ريح» قم بربط أربطة 
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يمكن لأشجار القرار Ul‏ حل اللشكلات الكمية بشن التنسيق:ق B al‏ الموجودة Je‏ اليسان ترد أن تعرش US 13] Le‏ 
نستثمر في عقار تجاري أم لا. هل هو مبنى مكاتب؟ مستودع أو مخزن المنزل؟ مبنى سكني؟ ظروف اقتصادية جيدة؟ الظروف 


الاقتصادية السيئة؟ كم سيعود عائد الاستثمار؟ يتم الإجابة على هذه الأسئلة وحلها باستخدام شجرة القرار هذه. 


Good economic 


conditions (.60) @ $50,000 
Apartment Poor economic @ $30,000 
building conditions (.40) 
Good economic 
conditions (.60) 4 $100,000 
mB Office building o 
Purchase Poor economic [ES] —$40,000 
conditions (.40) 
Wiaisho Good economic 
— conditions (.60) @ $30,000 
Poor economic & $10,000 
conditions (.40) N 
n 


عند اتخاذ شجرة القرار» هناك عدة عوامل يجب أن نأخذها في الاعتبار: ما هي الميزات التي نتخذ قراراتنا بشأنها؟ ما هو الحد 
الأدنى لتصنيف كل سؤال إلى إجابة بنعم أو لا؟ في شجرة القرار الأولى» ماذا لو أردنا أن نسأل أنفسنا إذا كان لدينا أصدقاء 
للعب معهم أم لا. إذا كان لدينا أصدقاء. سوف نلعب في كل مرة. إذا لم يكن الأمر AMIS‏ فقد نستمر في طرح الأسئلة على 
أنفسنا حول الطقس. من خلال إضافة سؤال إضافيء نأمل في تحديد فئتي "نعم" و"لا" بشكل أكبر. 


هذا ما يجعل أساليب المجموعة مفيدة! بدلا من الاعتماد فقط على شجرة قرار واحدة والأمل في اتخاذ القرار الصحيح في 
كل قسمء تسمح LS‏ الأساليب المجمعة بأخذ عينة من أشجار القرار في الاعتبارء وحساب الميزات التي يجب استخدامها أو 
الأسئلة التي يجب طرحها في كل قسم» وإجراء تقييم cile‏ متنبئ يعتمد على النتائج المجمعة لأشجار القرار التي تم أخذ عينات 
منها. 
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.BAGGing .1‏ أو Bootstrap AGG regating.‏ حصلت BAGGing‏ على Ll‏ لأنها تجمع بين Bootstrapping‏ 
و S AilAggregation‏ نموذج جماعي واحد. بالنظر إلى Aue‏ من البيانات» يتم سحب عينات فرعية متعددة تم 
lags‏ يه alias (Aa‏ ارغان كل من due a Seal‏ الى تم كيريد فا بع ته كيل كل pact‏ قرار assi‏ يكم 


استخدام خوارزمية للتجميع فوق أشجار القرار لتشكيل المتنئ الأكثر كفاءةكما موضح ادناه: 


Random subset 2 


TREE 2 


Results Aggregation 
Final Prediction 


Random subset 1 


TREE m : 


TREE 1 ] 


eet Rea] ida‏ سحب الات eal‏ ال م مها jb RA eg‏ عاق كل age‏ ي دة 
ويتم تجميع نتائج كل شجرة للحصول على أقوى وأدق أداة تنبق. 


2-نماذج الغابات العشوائية .يمكن اعتبار نماذج الغابات العشوائية بمثابة BAGGIng‏ مع تعديل طفيف. عند تحديد 
مكان التقسيم وكيفية اتخاذ القرارات» تتمتع أشجار القرار BAGGed‏ بالتخلص الكامل من الميزات للاختيار من بينها. cell‏ 
على الرغم من أن العينات التي تم تمبيدها قد تكون مختلفة قليلاًء إلا أن البيانات ستنقسم إلى حد كبير عند نفس الميزات في 
كل نموذج. على العكس من ذلكء تحدد نماذج Random Forest‏ مكان التقسيم flu‏ على مجموعة عشوائية من الميزات. بدلا 
من التقسيم إلى ميزات Ae Ua‏ في كل Bude‏ تنفذ نماذج Random Forest‏ مستوى من التمايز OY‏ كل شجرة ستنقسم بناءً 


على ميزات مختلفة. يوفر هذا المستوى من التمايز مجموعة أكبر للتجميعء مما يؤدي إلى إنتاج تنبؤ ABS ASÍ‏ 
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All Data 


tree tree tree 

¢ $ € 

A ۸ 

e" 9 © Fo 

A AA A 
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على غرارع 88060610 « يتم سحب العينات الفرعية التمهيدية من مجموعة بيانات أكبر. يتم تشكيل شجرة القرار على كل 


عينة فرعية. ومع ذلك» يتم تقسيم شجرة القرار على ميزات مختلفة (في هذا المخططء يتم تمثيل الميزات بالأشكال). 


خوارزميات الت غير الاشراق Clustering)‏ 

K-Means Clustering -1 

Clustering slo} ylo>‏ مثلها مثل خورازميات التصنيف لكن دون أصناف معرفة مسبقاًء فتحاول الخوارزمية العثور على 
الكائنات المتشابية من خلال بعض الميزات ثم دمجها في مجموعة واحدة. تصبح كل الكائنات التي لديها ميزات متشابهة في صنف 
واحد. وباستخدام بعض الخوارزميات الأخرى يمكننا تحديد عدد الفصول التي نحتاج Gel]‏ بشكل دقيق. 


ة تحديد المواقع على الخرائط برمز محدد Jls‏ جيداً على Clustering‏ > فعندما نبحث عن جميع المدارس الموجودة حولنا 
» تقوم خوارزمية Clustering‏ بتجميع هذه المدارس على شكل نقاط تحتوي على عدد هذه المدارس. 


تستخدم تطبيقات الصور في هواتفنا خوارزميات Clustering‏ أكثر تعقيداًء تبحث عن الوجوه في الصور المحفوظة لدينا ثم 
تقوم بإنشاء ألبوم لأصدقائنا US‏ على حدى. تحاول هذه الخوارزميات العثور على ميزات مشتركة في الوجوه ثم تقوم بتجميع 
كافة الصور التي تحتوي هذه الوجوه تحت ألبوم واحد وهكذا تكون قد كونت عدة عناقيد كل منها يبدأ بالألبوم ويحتوي على 
مجموعة من الصور. لاحظ أن هذه الخوارزميات لا تعرف عدد الاصدقاء لدينا ولا كيف يبدون لكنها قادرة على تجميعهم 
بالنظر إلى ميزات وجوههم فقط. 


عملية تجميع البيكسلات فى الصور ) ضغط الصور )من المشاكل الشائعة التي تعالجها خوارزميات Clustering‏ يمكننا ضبط 
لوحة الألوان على 32 لوناً عند حفظ صورة بصيغة PNG‏ على سبيل JULI‏ هذا يعني أن خوارزمية Clustering‏ ستجد جميع 
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وحدات البكسل الحمراءء وذلك بحساب متوسط اللون الأحمر واعادة ضبطه للون الذي تم تحديده من بين ال 32 لونء ما 
يعني ان الصورة الناتجة ستحوي ألواناً أقل JL‏ حجم الصورة يكون أصغر. 


8 5 [20-2 i CA SS 
ss a 98 as 
gë as 5 8 ع‎ 2:8 

E 9 +: & .9 

gw" | 8 ^8 : a 5‏ 6 
1 وزع العربات pigie‏ ! 2. راقب كيف يختار الزبائن ؛ ‏ 3.اتقل الهربات إلى أقرب 

في المدينة ' العرية الآقرب مركز للتجمع 

g5 58 i 5 5 

2 g.9.8 & 
a3" NEU Cg 

a : ع‎ 5 

4. راقب اختيارات ULE‏ : 5. تم تحديد الأماكن الأهثل 
وانقل Olja , axo‏ الطهام 


استخدام خوارزمية K-Mean‏ 
لتوزيع عربات الطعام المتنقلة 
في المدينة بالطريقة الأمثل 


Gaussian Mixtures(GMM) - 2 


خوارزمية (quai‏ مشابهه ل K-mean‏ ولكن تأخذ بعين الإعتبار التباين في القيم . حيث تستخدم ال Gaussian‏ وهي طريقة 
لرسم البيانات وفهم الخوارزمية لكيفية تشكيلها. 


المتوسط Mean‏ : وهو دائماً يكون في وسط Cluster J|‏ 

التباين Variance:‏ ويشكل طريقة توسع البيانات في ال Cluster‏ ففى الشكل التالى القيم شكلت 4 مجموعات وكما يظهر UJ‏ 
طريقة فوسعها يسبب lac‏ الخوارؤمية على اللتوسظ والتبايق. لتشكيل Jo Clusters!‏ مك Le‏ كانت dale‏ خوارزميةة| 
mean‏ التي تكون افضل على البيانات ذات الشكل الدائري . 


وللتوضيح بشكل أدق ففى الشكل التالى الفرق بين خوارزمية Gaussian Mixtures, K Means‏ فى طريقة تجميع الفئات 


GaussianMixture KMeans 


GaussianMixture KMeans 


طريقة عمل خوارزمية GMM‏ 4 

o‏ اختيار × كعدد Clusters U‏ وأختيار blä‏ بداية عشوائية. 

Le خاص‎ Cluster نحدد لكل نقطة في البيانات‎ o 

e‏ نحسب المسافة والتباين بين كل نقطة والنقطة المركزيةء ثم نقوم بتغير موقع النقطة المركزيةء ثم إعادة الحساب للمتوسط 
والتباين. 

o‏ اذاتوقف التغير في المتوسط يتم إختيار المنطقة كنقطة مركزية جديدة. 


طريقة تحليل Clusters]!‏ 


Feature Selecting‏ :اختيار المتغيرات او الخصائص المناسبة وتوجد طرق لإختيار الأفضل. 
Clustering Algorithm‏ :اختيار الخوارزمية المناسبة في التجميع واإعادة hue‏ حتى نصل لنتائج مرضية. 
Clustering Validation‏ :التحقق وعرض النتائج وتقيمها. 
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Cluster Validation 


في التعليم الموجّه كانت لدينا خيارات تقييم للمودل Accuracy S‏ و Precision]‏ في التعلم غير الموجّه توجد ثلاث خيارات 
لتقييم ال Cluster‏ وهي : 
External Index "‏ يتم فيه مقارنة النتائج في ال sa Cluster‏ النتائج الصحيحة (Labels)‏ المعروفة 
Internal Index "‏ يتحقق من النتائج لا GouCluster‏ الإعتماد على النتائج الصحيحه Ol)‏ لم تكن 
موجودة مثلاً). 
Silhouette Coefficient "‏ طريقة لحساب اداء ISICluster Jl‏ لم تكن هناك (Labels) est‏ عن طريق 
المعادلة التالية: 


bi - ai 


Max(bi — ai) 


a =‏ معدل المسافة من نقطة إلى bladi‏ الاخرى في نفس Cluster Ji‏ 

b=‏ معدل المسافة من نقطة إلى النقاط الأخرى في أقرب (allo Cluster‏ تحتوي على نقطتنا الحالية. 
نكرو هذه العملية على كل نقطة eo‏ قم تجمع الاح aal deg‏ وهو بالغالب رقم T oe‏ إلى 1 : 
ملاحظة: لا تستخدم هذه العملية Le Density-Based Clusterin‏ 3 نتائج aible‏ 


Relative Index — *‏ : تقارن بين اثنین من Clusters.)‏ 


ex التجميع‎ Hierarchical Clustering- 3 


تعمل طريقة التجميع الهرمي من خلال تجميع البيانات في شجرة من المجموعات. يبدأ التجميع الهرمي بمعاملة كل نقطة 
cll‏ #مجموعة متفصضلة كم يقوم بشكل oia, jS‏ القطوات Ad‏ 
= یی و ب ا 
- دمج الحد الأقصى للمجموعتين القابلتين للمقارنة. 
- ف الجموعات البرمية البدق هو إساج ساسلة غرمية من اعات المتداغلة (رسم مغطيط 
Dendrogram (Dendrogram (sa‏ هو رسم تخطيطي يشبه الشجرة يقوم بإحصاء تسلسل 
عمليات الدمج أو الانقسامات يمثل هذا التسلسل الهرمي Glu‏ وهو عبارة عن شجرة مقلوبة 
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تصف الترتيب الذي يتم به دمج العوامل (عرض من أسفل إلى أعلى) أو يتم تقسيم المجموعات 
لأعلى (عرض من أعلى إلى أسفل). 


ما هوالتجميع البرمي؟ 

التجميع البرض 90 طرقة لتخليل ال وات ق aal‏ ج البيانات all‏ تتفي (ja sa Sted‏ المجموعات ق bad Aegan‏ 
تبدأ الطريقة بمعاملة كل نقطة بيانات كمجموعة منفصلة ثم تجمع بشكل متكرر أقرب المجموعات Go‏ يتم الوصول إلى 
معيار التوقف. نتيجة التجمع الهرمي هي بنية تشبه الشجرةء تسمى مخطط الأشجارء والتي توضح العلاقات الهرمية بين 
المجموعات. 


© القدرة على التعامل مع التجمعات غير المحدبة والتجمعات ذات الأحجام والكثافات المختلفة. 
© القدرة على التعامل مع البيانات المفقودة والبيانات المزعجة. 


e‏ القدرةعلى الكشف عن البنية الهرمية للبيانات» والتي يمكن أن تكون مفيدة لفهم العلاقات بين المجموعات. 


عيوب التجميع البرمي 

© ضرورة وجود معيار لوقف عملية التجميع وتحديد العدد النهائي للمجموعات. 

© يمكن أن تكون التكلفة الحسابية ومتطلبات الذاكرة لهذه الطريقة مرتفعة. خاصة بالنسبة لمجموعات البيانات 

الكبيرة. 

© يمكن أن تكون النتائج حساسة للشروط الأوليةء ومعايير Lar‏ ومقياس المسافة المستخدم. 
Jy Tea Let‏ هو علوت ee‏ + البياقات جم اط انات سمائلة فق مجم وهات فن gasta aub‏ 
هرمي للمجموعات. 
يمكن oid‏ الطريقة التعامل مع أنواع مختلفة من SLL‏ وكشف العلاقات بين المجموعات. ومع ذلك» يمكن أن يكون لها 
تكلفة حسابية عالية ويمكن أن تكون النتائج حساسة لبعض الشروط. 
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أنواع المجموعات الهرمية : هناك نوعان من المجموعات الهرمية: 
© التجمعات التكتلية 
© التجمعات الانقسامية 
أولاً: التجمعات التكتلية: 
حيث يتم اعتبار كل نقطة بيانات بمثابة مجموعة فردية وفي US‏ خطوة. يتم دمج أقرب أزواج المجموعة. lel)‏ طريقة من 
أسفل إلى أعلى). في البدايةء تعتبر كل مجموعة بيانات US‏ فرديًا أو مجموعة. في كل تكرارء تندمج المجموعات مع مجموعات 


مختلفة حت يتم تشكيل مجموعة واحدة. 


تقوم خوارزمية التجميع الهرمي التكتل على النحو التالى: 

حساب تشابه مجموعة واحدة مع جميع المجموعات الأخرى (حساب مصفوفة القرب) 
اعتبار كل نقطة بيانات بمثابة مجموعة فردية 

دمج المجموعات المتشابهة إلى حد كبير أو القريبة من بعضها البعض. 

إعادة حساب مصفوفة القرب لكل مجموعة 

تكرار الخطوتين 3 و4 حتى تبقى مجموعة واحدة فقط. 

مثال يوضح طريقة عمل الخوارزمية 


نفترض أن لدينا ست نقاط بيانات ۸ و8 F.gE9D9 Co‏ 


oe E 


6 ES 

- ar DE بجر‎ DEF 
(E X l 
(E 


| Step 1 | | Step 2 | | Step 3 | Step 4 Step 5 


Agglomerative > 
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1- افترض أن كل أبجدية بمثابة مجموعة واحدة ويحساب مسافة مجموعة واحدة من جميع المجموعات الأخرى. 

2- يتم دمج المجموعات المماثلة معا لتكوين مجموعة واحدة. لنفترض أن المجموعة (B)‏ والمجموعة (C)‏ متشابهتان 
جدًا مع بعضهما البعضء لذلك قمنا بدمجهما في الخطوة الثانية بشكل مشابه للمجموعة (D)‏ و (E)‏ وفي الهايةء 
حصلنا على المجموعات [(A), (BC), (DE), (F)]‏ 

Solel -3‏ حساب المجموعات ads‏ للخوارزمية وندمج أقرب مجموعتين( US [(DE), (F)])‏ لتكوين مجموعات جديدة 
مثل [(A), (BC), (DEF)]‏ 


4- :تكرر نفس العملية؛ المجموعتان DEF‏ و80 قابلتان للمقارنة ويتم دمجهما معا لتكوين مجموعة جديدة. يتبقى 


لدينا GY!‏ المجموعات [(A), (BCDEF)]‏ 
5- أخيرّاء يتم دمج المجموعتين المتبقيتين معا لتكوين مجموعة واحدة [(ABCDEF)].‏ 


LoG‏ :| عات البرمية المقسمة: 


يمكننا القول أن التجميع البرم المقسم هو بالضبط مكس التجميع USGI Gard)‏ فى التجميع البرمي المقسم Gets‏ 
الاعتبار جميع نقاط البيانات كمجموعة واحدة وفي كل تكرارء نقوم بفصل blä‏ البيانات عن المجموعات غير القابلة 


BEE j‏ عر BE‏ با 


Step 5 | | Step 4 | Step 3 | | Step2 Step 1 


< Divisive 
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Spectral Clustering- 4‏ التجميع الطيفي 

Boosting- 5‏ التعزيز: 

التعزيز عبارة عن إستراتيجية تعلم آلي خاضعة للإشراف تجمع بين تنبؤات النماذج الضعيفة المتعددة (النماذج الأساسية) 
لإنقاء pat‏ مسيم قوق يركز Se cle ipid‏ أساليب اة الكلاشيكية مكل cM] aoa‏ عن نر 
السناقع Aaa al‏ بشكل ade‏ بطريقة تؤكن غلى العيقا الى فم Lia‏ بشعل عا من التكرارات السابقةاليدف هو 
تحديد أولويات العينات التي تم تصنيفها بشكل غير صحيح في التكرارات السابقةء مما يسمح للنموذج بالتعلم من أخطائه 
وتحسين أدائه بشكل متكرر. 


تهيئة الأوزان ءا عامس Initialise‏ : في بداية العمليةء يتم إعطاء كل مثال تدريبي 55 متساويًا. 

تدريب Train a weak learners sus plais‏ : يتم استخدام بيانات التدريب الموزونة لتدريب متعلم ضعيف. المتعلم 
الضعيف هو تموذج بسيظ يتفوق على التخمين العشواتي بشكل هامثي فقط: على سبيل SUL!‏ يمكن استخدام شجرة 
القرار ذات المستويات القليلة كمتعلم ضعيف. 

حساب الخطأ Error calculation‏ يتم حساب خطأ المتعلم الضعيف في بيانات التدريب. ويشكل المجموع المرجح للحالات 
تحديث الأوزان “Update weights‏ يتم تحديث الأوزان حسب معدل الخطأ في الأمثلة التدريبية. يتم إعطاء الأمثلة 
المصنفة بشكل خاطن أوزان «Ael‏ في حين يتم إعطاء الأمثلة المصنفة بشكل صحيح أوزان أقل. 

تكرارالعملية : يتم تكرار الخطوات من 2 إلى 4 عدة مرات. يتم تدريب المتعلم الضعيف الجديد على الأوزان المحدثة للأمثلة 
التدريبية في كل دورة. 

دمج المتعلمين الضعفاء Combine weak learners‏ : يتكون النموذج النهائي من جميع المتعلمين الضعفاء الذين تم 
تدريبهم في الخطوات السابقة. يتم ترجيح دقة كل متعلم ضعيف. ويستند التنبؤ النهائي إلى المجموع المرجح للمتعلمين 
الضعفاء. 

التنبؤ: يتم استخدام النموذج النهائي للتنبؤ بتسميات فئات المثيلات الجديدة. 


تم تصميم أسلوب التعزيز لإنتاج متعلم قوي ودقيق في بيانات التدريب ويمكنه التعميم بفعالية على البيانات الجديدة. 
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طرق ختلفة xl‏ زيز 


AdaBoost‏ ( التعزيز التكيفي): هي واحدة من خوارزميات التعزيز ASY‏ استخدامًا على نطاق واسع. فهو يعطي أوزانًا لكل 
نقطة بيانات في مجموعة التدريب flu‏ على دقة النماذج Ad Lill‏ ثم يقوم بتدريب نموذج جديد باستخدام الأوزان المحدثة. 
يعد AdaBoost‏ مفيدًا جدًا لهام التصنيف. 

)Gradient Boosting‏ تعزيزالتدرج) : يعمل تعزيز التدرج عن طريق ملاءمة النماذج الجديدة مع الأخطاء المتبقية في 
dif AR Lal c La‏ يقال Mil cya‏ العسارة Saag cai EEEE‏ تطبيقه de‏ كل من مشناكل الامجداو 
والتصنيف. تتضمن تطبيقات تعزيز التدرج الشائعة LightGBM. g XGBoost‏ 

Stochastic Gradient Boosting‏ (تعزيز التدرج العشواني) : على غرار تعزيز التدرجء يناسب تعزيز التدرج العشوائي كل 
gigas‏ جديا pe‏ سجتوعانه Agile Ate‏ من cll colas‏ وات Aaa‏ رة من الزات يبنا عند e lia‏ 
تجنب التجهيز الزائد وقد يؤدي إلى تحسين الأداء. 

LPBoost‏ )55523 البرمجة الخطية ) :((Linear Programming Boosting‏ عبارة عن خوارزمية معززة تقلل من وظيفة 
الخسارة الأسية باستخدام البرمجة الخطية. وتكون قادرة على التعامل مع مجموعة واسعة من وظائف الخسارة ويمكن 
Lies‏ عا كل من Yad‏ الاعف ELE‏ 

)TotalBoost‏ التعزيز الإجمالي): عبارة عن طريقة تعزيز AdaBoost‏ و LPBoost.‏ وهو يعمل عن طريق تقليل مزيج من 
خسائر البرمجة الأسية والخطيةء ويمكنه زيادة الدقة لأنواع معينة من المشاكل. 

clita اللطروببالإشبافة إل زات مخ وة‎ aua E من‎ B) الخوارومية‎ getan ti 


هنا مقارنة بين الأنواع المختلفة من خوارزميات التعزيزء مع الأمثلة ونقاط قوتها وهى موضحة بالجدول التالى : 
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Algorithm Description Example Strengths 
AdaBoost Assigns weights to data Classification Works well with weak 
points and trains new problems with large learners, less prone to 
models on updated number of features or overfitting, fast to train 
weights complex decision 
boundaries 
Gradient Fits new models to the Regression and More flexible than 
Boosting residual errors of classification problems AdaBoost, can handle 
previous models with complex non-linear relationships 
interactions between between features, good for 
features handling high-dimensional 
data 
Stochastic Uses random subsets of Large datasets with Robust to overfitting, 
Gradient training data and many features and faster than traditional 
Boosting features for each new noisy data gradient boosting, good 
model for handling high- 
dimensional data 
LPBoost Uses linear programming Regression and Can handle a wide range of 
to minimize exponential classification problems loss functions, works well 
loss function with sparse data or with sparse data, can 
high-dimensional handle large number of 
feature spaces features 
TotalBoost Combines AdaBoost and Classification and Can improve accuracy 
LPBoost to minimize regression problems over AdaBoost and 
combination of with complex decision LPBoost, works well with 
exponential loss and boundaries and sparse sparse data, can handle 
linear programming loss data high-dimensional feature 
spaces 
يوفرالتعزيزفوائد متعددة. منها:‎ 
الأداء المحسّن: نظرًا لأن التعزيز يجمع بين تنبؤات أي نماذج أساسيةء فإنه يقلل بشكل فعال من التحيز والتباين» مما يؤدي‎ 


إلى تنبؤات أكثر دقة وقوة. 


القدرة على التعامل مع البيانات المعقدة: يمكن أن يتعامل التعزيز مع أنماط البيانات المعقدة, بما في ذلك الارتباطات 


والتفاعلات غير الخطية: مما وجعلة Gaitis‏ لمجموعة واشعة من Liles‏ التعلم الأل مثل التصبتيف والاتحدان والتصبتيف. 
المتانة في مواجهة الضوضاء: عند مقارنتها بتقنيات التعلم الآلي الأخرىء يكون التعزيز أقل عرضة للضوضاء في بيانات 
التدريب لأنه يركز على العينات المصنفة بشكل خاطئ ويعطي أوزانًا أكبر لهاء مما يقلل بشكل فعال من تأثير العينات المزعجة 


على التنبؤات النهائية. 
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المرونة: تعد خوارزميات التعزيز متعددة الاستخدامات ويمكن استخدامها مع مجموعة متنوعة من النماذج الأساسية 
ووظائف الخسارة» مما يسمح بالتخصيص والتكيف مع مجالات المشكلات المختلفة. 

قابلية التفسير: في حين يُشار إلى نماذج التعزيز بشكل متكرر على أنها نماذج "الصندوق الأسود". إلا Lal‏ يمكن أن توفر 
بعض القابلية للتفسير من خلال تصنيفات أهمية الميزات» ly‏ يمكن أن تساعد في ed‏ القيمة النسبية للميزات المختلفة في 
تطبيقات التعزيز :تم استخدام التعزيز بنجاح في مجموعة متنوعة من مهام التعلم الآليء Loy‏ في ذلك: 

التعرف على الصور والأشياء: تم استخدام التعزيز في تطبيقات رؤية الكمبيوتر ald‏ التعرف على الصور والأشياء مثل 
اكتشاف الوجه والتعرف على الإيماءات واكتشاف الأشياء. قد تنجح الخوارزميات المعززة في تعلم الأنماط المعقدة في الصور 
وتعزيز دقة نماذج التعرف» مما يؤدي إلى تطبيقات في القياسات الحيوية والمراقبة والمركبات ذاتية القيادة. 

معالجة النصوص واللغة الطبيعية: تم استخدام التعزيز في مهام مثل تحليل المشاعر وتصنيف النص والتعرف على الكيانات 
المسماة في معالجة النصوص واللغة الطبيعية. يمكن لتقنيات التعزيز التعامل مع الطبيعة عالية الأبعاد والمتناثرة للبيانات 
النصية بنجاح» مما يؤدي إلى تحسين slal‏ النموذج في تطبيقات مثل تحليل مشاعر وسائل التواصل الاجتماعي» واكتشاف 
البريد العشوائيء وتصنيف النص. 

كشف الاحتيال: تم استخدام التعزيز لتحديد الاحتيال في مجموعة متنوعة من الصناعات» بما في ذلك التمويل والتأمين 
والتجارة الإلكترونية. يمكن أن يؤدي تعزيز الخوارزميات إلى الكشف عن أنماط السلوك الاحتيالي في مجموعات البيانات 
الكبيرة والمعقدة. وتحسين دقة اكتشاف الاحتيال وتقليل الإيجابيات/السلبيات الكاذبة في أنظمة كشف الاحتيال. 
التشخيص الطبي: تم استخدام التعزيز في مهام التشخيص الطبي مثل تصنيف الأمراضء والتنبؤ بنتائج المريضء وتطوير 
الأدوية. ومن الممكن أن تتعلم الخوارزميات المعززة من مجموعات البيانات الطبية الكبيرة مثل البيانات السريريةء والتصوير 
الطبيء والبيانات الجينية لتعزيز دقة التشخيص ونماذج التنبؤء وبالتالي تمهيد الطريق للطب الشخصي والرعاية الصحية. 
أنظمة التوصية: تم استخدام التعزيز في أنظمة التوصية لتقديم اقتراحات مخصصة مثل توصيات المنتجات في التجارة 
الإلكترونيةء وتوصيات الأفلام في منصات البث المباشرء وتوصيات المحتوى في بوابات الأخبار. يمكن للخوارزميات المعززة 
تسجيل تفضيلات المستخدم وأنماط سلوكه لتقديم اقتراحات دقيقة وزيادة تفاعل المستخدم. 

تحليل السلاسل الزمنية: تم استخدام التعزيز في تطبيقات تحليل السلاسل الزمنية مثل التنبؤ بسوق الأوراق الماليةء والتنبؤ 
بالطقس.ء والتنبؤ بالطلب. يمكن للخوارزميات المعززة التقاط العلاقات والأنماط الزمنية في بيانات السلاسل الزمنية بكفاءةء 


مما يؤدي إلى تحسين دقة التنبؤ واتخاذ القرار في مجالات مثل التمويل والزراعة وإدارة سلسلة التوريد. 
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الفصل الثالث :أسس التعلم العميق Deep Learning‏ 
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مقدمة 
التعلم العميق هو فرع من فروع الذكاء الاصطناعى وتعلم Sag UY‏ إيجاد نظريات وخوارزميات تتيح للآلة التعلم من تلقاء 
نفسها عن طريق محاكاة الخلايا العصبية في جسم الإنسان أى Lal‏ مشابهة تماما للطريقة اللي يعمل Le‏ العقل البشري. 


التعلم العميق هو برنامج كمبيوتر يحاي شبكة الخلايا العصبية في المخ. وتسمى التعلم العميق LEY‏ يستخدم الشبكات 
العصبية العميقة. 
يتم إنشاء خوارزميات التعلم العميق باستخدام طبقات متصلة حيث: 
e‏ الطبقة الأول تسمى طبقة الإدخال . 
e‏ الطبقة الأخيرة تسمى طبقة الإخراج 
ound ©‏ جميع الطبقات الموجودة بينهما بالطبقات المخفية. كلمة عميق تعني وتنضم الشبكة إلى الخلايا العصبية في 
تتكون كل طبقة مخفية من الخلايا العصبية. ترتبط الخلايا العصبية كل منها بالآخر. ستقوم الخلية العصبية بمعالجة 
ثم نشر إشارة الإدخال التي تستقبلها . 
تستهلك الشبكة كميات كبيرة من بيانات الإدخال وتقوم بتشغيلها من خلالها طبقات متعددة؛ يمكن للشبكة أن تتعلم 
ميزات البيانات المعقدة بشكل متزايد في كل طبقة 


Input layer 


} Hidden layer 


Output layer 
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تمشعلف ASI plat‏ عن العم الق ق أن فلم Ge lll e piel ety AY‏ طريق pled eura‏ الال تكن ق الك 


التعلم من البيئة ( محاكاة البيئة ). 

Machine Learning 2 

® duc r3 Ei 

Input Feature extraction Classification Output 

Deep Learning 

® 1173 B 
Feature extraction * Classification Output 

E و‎ 


فيستخدم شبكات عصبية مصطنعة لتعليم الأجهزة بطريقة تفاعلية طرق تحسين أدائهم تدريجيا. ويسمح للأجهزة انها 


Venonte 


Axon terminal 


Myelin sheat 


Myelinated axon 


أى أن التعلم العميق هو شكل متقدم من التعلم الآلي الذي يحاول محاكاة الطريقة التي يتعلم بها الدماغ البشري. مفتاح 
التعلم العميق هو إنشاء شبكة عصبية اصطناعية تحاكي النشاط الكبروكيميائية في الخلايا العصبية البيولوجية باستخدام 
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الشبكة العصبية البيولوجية الشبكة العصبية الاصطناعية 


J (fom) 


فالشيكة الحصببية للإنسان يشكوق من هلايين LOLS‏ العضييية اللى بتتواضل مع aaa‏ بواسطة الاتسبالات العصببية» 
والشبكة العصبية الاصطناعية بتستخدم خطوط اتصال بين الخلايا الاصطناعية. 
كما أن التعلم في الشبكة العصبية للإنسان بيكون عن طريق التجارب والتفاعل مع البيئة» وفي الشبكة العصبية 
الاصطناعية بيكون عن طريق تحليل مجموعة من البيانات المدخله و التعديل Le‏ 

الشيكة العصبية الاميظنافية part‏ بالقدرة على المعالجة السريعة والدقيقة للبيانات الكبيرة والمعقدة. 


Rf "aa A. o N 
4 Wf "uum A. Ln | 

1 = 1 Rf sence nS 2 cat 

aye Layern | 


Layer 1 : recognize shapes such as lines, circles, rectangles, and points 
Layer 2,n : The deeper you go, the more things a layer can recognize 


ن اكات T‏ ال عة من كات ataca‏ من ا العصبية شعرى abad‏ وكات ماف حمق $38 
البنية هي السبب في ظهور وانتشار تقنية التعلم العميق وغالبا ما يشار إلى النماذج التي تنتجها باسم الشبكات العصبية 
العميقة (ONN)‏ بحيت يمكن. استغدام الشبكات الغصبية العميقة p loi‏ عذيدة من مشكلات التعلم cS‏ بما d‏ ذلك 
الانحدار والتصنيف, بالإضافة إلى نماذج أكثر تخصصا لمعالجة اللغة الطبيعية ورؤية الكمبيوتر. 
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آليات العمل بنماذج التعلم العميق مثلها مثل تقنيات التعلم JYI‏ حيث ملاءمة بيانات التدريب للتنبؤ بالتسمية (y)‏ استنادا 
إلى قيمة ميزة واحدة أو (x) AST‏ 


كيف تتعلم الشبكة العصبية؟ 


الأوزان التي ستؤدي إلى التنبؤات الأكثر دقة. فيما يلى خطوات لفهم كيفية حدوث هذا التعلم. 


Da X»XsX4], y 
[xq Xa X3Xa], y 
[X,X»XX4], Y 
Da X»XsX4], y 


Bx. y x 


[x,XoXX4], Y 
[XXa XXa], y 
DaX»X3X4, y 


y loss =f. y) 


loss 


يتم تعريف مجموعات بيانات التدريب والتحقق من صحتماء ويتم تغذية ميزات التدريب في طبقة الإدخال. 
تطبق الخلايا العصبية في كل طبقة من طبقة الشبكة أوزانها (التي يتم تعيينها بشكل عشوائي في البداية) وتغذي 
البيانات من خلال الشبكة. 

تنتج طبقة الإخراج متجها يحتوي على القيم المحسوبة .لآ 

تستخدم دالة الخسارة لمقارنة قيم ل المتوقعة بقيم y‏ المعروفة وتجميع الفرق (الذي يعرف باسم الخسارة 
نظرا لأن الشبكة بأكملها هي في الأساس دالة متداخلة كبيرةء يمكن لدالة التحسين استخدام حساب التفاضلية 
لتقييم atl‏ كل od‏ الشتبكة على العسارةة وتحديد Aus‏ تعديلها الأغلى أو الأسفل) lac!‏ مقدانالخسارة 
الإجمالية. يمكن أن تختلف تقنية التحسين المحددة, ولكنها تتضمن Bale‏ نهج هبوط متدرج حيث يتم زيادة كل وزن 
أو تقليله لتقليل الخسارة. 

يتم توفير التغييرات على الأوزان مرة أخرى إلى الطبقات في الشبكة» مع استبدال القيم المستخدمة سابقا. 
s‏ العملية غير تكرارات متعد دة chai)‏ جاسم (esl fall‏ حى يعم alat‏ الكسارة O Ling‏ ةة Aged‏ 


لفهم مضمون التعلم العميقء ينبغي أن ننطلق من بدايات بسيطة وسهلة. وعلى تلك البدايات سنبني صورةً AST‏ تعقيدًا 
وتفصيلًا؛ إلى أن نتمكّنء من فهم ما تعنيه كلمة «عميق» في مصطاح التعلم العميق. 


الخلايا العصبيةء الحقيقية والاصطناعية 
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سنبدأ من حجر الزاوية الأسامي لأنظمة التعلم العميق» القادم من علم الأحياء. الدماغ جزء من الجهاز العصبيء والمكوّنات 
الأساسية للجهاز العصبي عبارة عن خلايا Aud‏ الخلايا العصبية. تتميز الخلايا العصبية بشكل خاص؛ في تبدو مختلفة في 
الشكل عن البنى الكروبة التي bale‏ ما نربطها بالخلايا. وفيما يلي واحدة من أولى صور الخلايا العصبيةء رسمها العالم الإسباني 
سانتياجو رامون إي JLE‏ عام ۱۸۹۹ء أحد مؤسسي علم الأعصاب الحديث. 


كما ترىء تتكوّن الخلية العصبية من جسم الخلية والخيوط التي تنبثق منها. تربط هذه الخيوط الخلية العصبية بخلايا عصبية 
أخرى عبر «تشابكات عصبية» بطريقة تدمج الخلايا العصبية في شكل شبكة. الخلايا العصبية غير متماثلة. فيوجد العديد من 
الخيوط في جانب وخيط واحد فقط في الجانب الآخر لكل خلية عصبية. يمكننا القول إن الخيوط العديدة في الجانب الأول 
تمثّل مدخلات الخلية العصبيةء والخيط الطويل الخارج من الجانب الآخر يمتّل مخرج الخلية العصبية. تستقبل الخلية 
العصبية المدخلات في شكل إشارات كهربية من تشابكاتها العصبية الواردة وقد ترسل إشارة إلى الخلايا العصبية الأخرى. وكلما 
زادت الإشارات الواردة» زاد احتمال أن ترسل هي إشارة. عندئذٍ نقول إن الخلية العصبية «محفزة» أو «نشطة». 


الخوارزميات تأليف بانوس لوريداس ترجمة إبراهيم سند أحمد مراجعة شيماء ab‏ الريدي؛ 2017 م. 


الدماغ النشري يتكون من شيكة ضخمة من LA‏ العضبية؛ lanae. jag‏ بحوال ماقة مهار خلية: Jarc‏ كل غلية 
مستمدة من نماذج مبسطة ومثالية للخلايا العصبية. 
في هذا السياق» يتم تقديم نموذج لخلية عصبية اصطناعية كنموذج تجريدي للخلية العصبية الحيوبة. يتألف هذا النموذج 


من مجموعة معينة من المدخلات ومخرج واحد. 
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يتوقف مخرج الخلية العصبية الحيوية على المدخلات التي تتلقاهاء وعلى نفس النحوء Bie‏ تنشيط الخلية العصبية 
الاصطناعية إلى الاعتماد على مدخلاتها. ولكن لتحقيق هذاء يجب أن يتوافر لدينا نموذج حوسبي للخلية العصبية 
الاصطتاعية. 


لنفترض أن الإشارات التي تستقبلها الخلايا العصبية وترسلها عبارة عن أرقام. ric‏ تأخذ الخلية العصبية الاصطناعية كل 
المدخلات وتحسب قيمةً حسابيةً ما بناءً على تلك المدخلات» وتخرج لنا بنتيجة ما على مخرجها. لا نحتاج إلى أي دارة خاصة 
لتنفيذ خلية عصبية اصطناعية. يمكنك تخيّلها كبرنامج صغير على جهاز كمبيوتر يستقبل المدخلات ويحوّلها إلى مخرجات» 
مثل أي برنامج آخر على الكمبيوتر. لسنا بحاجة إلى بناء شبكات عصبية اصطناعية بالمعنى الحرفي؛ بل يمكننا محاكاتها liag‏ 
ما يقوم به بالفعل التعلم العميق. 


جزء من عملية التعلم في الشبكات العصبية البيولوجية يكمُن في تقوبة التشابكات العصبية بين الخلايا العصبية أو إضعافها. 
فاكتساب قدرات معرفية جديدة واستيعاب المعلومات يؤديان إلى تقوية بعض التشابكات العصبية بين الخلايا العصبيةء بينما 
يؤدي ذلك إلى إضعاف خلايا أخرى أو حتى إخمادها بالكامل. إضافة إلى ذلكء قد لا تؤدي التشابكات العصبية إلى تحفيز adal‏ 
العصبية فحسب» بل إلى تثبيط نشاطها؛ وعندما تصل إشارة إلى ذلك التشابكء لا تحفز تلك الخلية العصبية. ولدى الأطفال 
الوْضِع تشابكات عصبية في أدمغتهم AST‏ من الكبار. وتشذيب الشبكات العصبية داخل أدمغتنا جزء من النمو. ريما يمكن 
تشبيه دماغ الطفل الرضيع بكتلة من الرخام؛ كلما مرّت علينا السنينء Las‏ تلك الكتلة جراء التجارب والأشياء التي نتعلمهاء 
ويظهر لہا شكل محدّد. 


في الخلية العصبية الاصطناعية؛ jai‏ مرونة التشابكات العصبية ودورها المحفز أو المثبط من خلال «أوزان» نخصصها 
للمُدخلات. في نموذج الخلية العصبية الاصطناعية. لدينا ١‏ من المدخلات (x1‏ ۸........×2× نخصّص لكل مُدخل مہا وزتا (w)‏ 
pad wn cn 2 ew >‏ كل وزن في المدخل الموازي له. المدخل الأخير الذي تستقبله الخلية العصبية هو مجموع حواصل 


العصبية للاستثارة أو التحفيز؛ وكلما زاد الانحيازء زاد ميلها إلى النشاطء بينما سيؤدي إضافة انحياز سلبي إلى الإدخال الموزون 
إلى تثبيط الخلية العصبية وعزوفها عن الاستثارة. 
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تعد قيم الأوزان والانحياز «معاملات» الخلية العصبية لأا تؤيّر في سلوكها. Uy‏ كانت مخرجات الخلية العصبية الحيوية تعتمد 
على مدخلاتهاء فإن مخرجات الخلية العصبية الاصطناعية تعتمد على المدخلات التي تستقبلها. وتتم تلك العملية عن Gob‏ 
تغذية المدخلات في دالة تنشيط خاصة:, التي تكون نتيجتها هي مخرجات الخلية العصبية. وهذا ما يحدث» على المستوى البياني» 
باستخدام الدالة )0( f‏ كبديل لدالة التنشيط. 


أبسط دالة تنشيط عبارة عن دالة درجيةء تعطينا النتيجة . أو Soi .١‏ الخلية العصبية وتعطي النتيجة ١‏ إذا كان المدخل 
إلى دالة التنشيط أكبر من صفرء أو تبقى النتيجة AU‏ على صفر إذا كان المدخل غير ذلك: 


بدلا من التفكير في الانحيازء من المفيد أن نفكر في حدّ. تعطي الخلية العصبية النتيجة ١‏ إذا كانت المدخلات الموزونة أعلى من 
الحد» وإذا كانت غير ذلك فستكون النتيجة صفرًا. في الحقيقةء إذا كتبنا سلوك الخلية العصبية في شكل صيغة» تكون الحالة 


الخلية العصبية لتحفيزها. 
هناك ثلاث دوال شائعة أخرى غير الدالة الدرجية السابقة يمكن توضيحها على النحو التالى : 


الدالة السينية: LEY‏ تأخذ شكل حرف 5 وتتراوح مخرجاتها من صفر إلى 1 فالمدخلات الكبيرة الموجبة تعطي مخرجات قريبة 
من ١ء‏ والمدخلات الكبيرة السالبة تعطي مخرجات قريبة من صفر. وهذا يقارب خلية عصبية حيوية pai‏ مع المدخلات الكبيرة 
وتبقى ثابتة إذا كانت غير AUS‏ كما Lef‏ تعتبر تقريب سلس إلى الدالة الدرجية. 
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دالة الظل الزائدي : وهى تشبه الدالة السينيةء ولكنها تختلف في أن مخرجها يتراوح بين ١-‏ و+١؛‏ إذ تؤدي المدخلات الكبيرة 
المالبة إل تنيجة A La‏ 


دالة المصحح: )5 تحول كل المدخلات السالبة إلى صفرء Yl‏ فسيتناسب مخرجها طرديًا مع مدخلاتها. يوضح الجدول التالي 
مخرجات دوال التنشيط الثلاث لمدخلات مختلفة. 


ولكن ما هو سبب انتشار دوال التنشيط في ظل وجود دوال غيرها؟ الاجابة عن هذا التساؤل تكمن فى أنه ثبت عمليًا أن بعض 
Jiga‏ التنشيط أنسب في بعض التطبيقات من غيرها. Uy‏ كانت دالة التنشيط بالغة الأهمية بالنسبة إلى الخلية العصبيةء 
فغالبًا ما تسمّى الخلايا العصبية باسم دوال التنشيط الخاصة بها. فالخلية العصبية التي تستخدم الدالة الدرجية تسى 
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leet Ug] c3] «cg apt‏ العمبية السيتية والخلية الخصبية cols‏ الكل الوائدي AMIS‏ نطق LSI fe‏ الم 
«وحدات»»: بينما تسكى الخلية العصبية التي تستخدم دالة المصحح الوحدة الخطية المصححة sl)‏ ;51( 


يمكن أن تتعلّم الخلية العصبية الاصطناعية الفردية التمييز بين مجموعتين من العناصر؛ على سبيل المثال» لنأخذ البيانات 

في الصورة الأولى فيما يلي التي تصوّر مجموعة من الملإحظات بعلامتين» 1× على المحور الأفقي x29‏ على المحور الرأمي. نريد أن 
نبني نظامًا يستطيع التفريق بين مجموعتي النقاط. بناءً على أي عنصرء سيتمكن النظام من تحديد إذا ما كان العنصر يقع في 
إحدى المجموعتين أو الأخرى. في الواقع. سينثئ النظام «حدًا للقرار». كما في الشكل الثاني. بالنسبة إلى أي مجموعة مكوّنة 
من (1»*. «(x2‏ سيخبرنا النظام إذا ما كان العنصر ينتمي إلى المجموعة ذات اللون الفاتح أم ذات اللون القاتم. 


لن تتضمّن الخلية العصبية RSÍ‏ من مدخلين. ستأخذ كل زوج (1<«. (X2‏ وتحسب مخرجًا. إذا ÚS‏ نستخدم دالة التنشيط 
السينيةء فسيتراوح المخرج بين( ٠‏ و١)‏ سنأخذ القيم الأكبر من 5,. وندرجها في إحدى المجموعتين ونأخذ القيم الباقية وندرجها 
في المجموعة الأخرى. بهذه الطريقة. سوف تعمل الخلية العصبية كمصنف. يصنف البيانات إلى فئتين مختلفتين. ولكن كيف 
تفعل ذلك؟ كيف يمكن للخلية العصبية أن تصل إلى مرحلة القدرة على تصنيف البيانات؟ 
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عملية التعلم: 


في لحظة إنشاء الخلية العصبيةء لا تتمن الخلية من التعرف على أي نوع من البيانات؛ بل تتعلّم التعرف على البيانات. ويتم 
هذا التعلّم بطريق الأمثلة. 


العملية Le‏ تشبه تعليم الطالب Loo‏ جديدًا بإعطائه مجموعةً كبيرة من المسائل عن موضوع ما مصحوبة بالحلول. نطلب 
من الطالب أن يذاكر CS‏ مسألة وحلها. إذا كان الطالب مجتهدًاء فإننا نتوقّع أن يتعلم كيفية الانتقال من المسألة إلى الحل بعد 
الاطلاع على gue‏ من المسائلء بل يتمكن من حل مسائل جديدة ذات صلة بالمسائل التي درسهاء ولكنه سيحلها هذه المرة من 
دون أن يلجأ إلى أي حلول. 


بيانات التدريب». aig‏ هذا مثالا على «التعلم الموجّه»؛ لأن الحلول توجّه جباز الكمبيوتر مثل المشرف نحو البحث عن 


والتعلم الموجّه هو الشكل الأكثر شيوعًا من أشكال تعلّم AIS‏ وهو الفرع الذي يتعامل بالكامل مع طرقٍ ندرّب من خلالها 
أجهزة الكمبيوتر على إنجاز المهام. 


حلول معبا. توجد تطبيقات dope‏ للتعلم غير toll‏ ومنها على سبيل JUL‏ تجميع الملاحظات في مجموعات مختلفة ؛ Y)‏ يوجد 
حل مسبق يشير إلى ماهية المجموعة الصحيحة). 


التعلم الموجه بالخلايا العصبية الاصطناعية : 
في لحظة إنشاء الخلية العصبية, لا تتمكن الخلية من التعرُف على أي نوع من البيانات؛ بل تتعلم Shall‏ على البيانات. وبتم 
هذا التعلّم بطريق الأمثلة. 


بعد القدريب» غالا ما يمر الطالب cds] aay‏ للوقوف علق مدق إتقاته للمادة بالل ف تعلم ASI‏ تمظن jhe‏ 
الكمبيوتر بعد التدريب مجموعة بيانات أخرى لم Lap‏ من قبل ونطلب dio‏ حل «مجموعة بيانات الاختبار» تلك. بعد ذلك 
elas‏ أذاء elas ollas‏ الآلة £s‏ على مدق إجاذقة لحل المسائل فى مجموعة بياتات hers!‏ 


ف dogo‏ التضتيف: sad‏ التدريب ف القتعم الموكه بإعطاء الشبكة العصبية عددًا كبر من CUS‏ (التساؤلات) ومعها 
الفئات الخاصة بها (الحلول). ونتوقع أن تتعلم الخلية العصبية بصورة أو بأخرى كيفية الانتقال من ملاحظة ما إلى التصنيف 
الخاص بها. عندئذٍ إذا أعطيناها ملاحظة لم ترّها من قبلء يفترض أن تصيّفها بقدرٍ معقول من النجاح. 

يتحدّد سلوك الخلية العصبية تجاه أي مدخل حسب أوزانه وانحيازه. عندما نبدأء نضع الأوزان والانحياز بقيم عشوائيةء دون 
أن تعلم الخلية العصبية شيئًا عنهاء مثل طالب جاهل بلا أي معلومات. ثم نعطي الخلية العصبية مدخلا واحدًا في شكل 
مجموعة زوجية tlds (x2 x1)‏ الخلية العصبية مُخرجًا؛ بما أن لدينا قيم أوزان وانحياز عشوائية, ستكون المخرجات Dai‏ 
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عشوائية. لكننا نعلم الإجابة الصحيحة التي ينبغي أن تصدر من الخلية العصبية بالنسبة إلى كل ملاحظة من الملاحظات في 
مجموعة بيانات التدريب. Lie‏ يمكننا حساب مدى يُعد مخرجات الخلية العصبية عن المخرجات المطلوبة. ويُطلّق على تلك 
النتيجة «الخسارة» وهي قياس درجة خطأ الخلية العصبية بالنسبة إلى مُدخل معيّن. 


عن سييل ye eri 13) e IU‏ هد كاك الخلية العصيية Uhr‏ قيسه زكر )اق حن coil ob‏ اللطلوب (V) pa‏ بك 
حساب الخسارة عن طريق طرح القيمتين إحداهما من الأخرى. 


وتجنبًا للاضطرار إلى التعامل مع العلامات, dole‏ ما نعتبر الخسارة تربيعٌ ناتج الطرح؛ وني هذا المثال ستكون V)‏ -0,5)؟ = 
ss bk‏ 


واذا كان المخرج المطلوب( .,. )عندئنٍ ستصبح الخسارة (.,. - 7ر.)؟ - 5 ٠ر..‏ 


« يمكننا الآن: بعد أن حسبنا الخسارةء تعديل الأوزان والانحيازلتقليلها. 


agai‏ إل الطالب» يع كل Alguna‏ فاشلة لحل مرين ila‏ تفه de‏ تقديم ola‏ أفغيل. AIS,‏ الطالب أ eat dale‏ طريفقة 
قليلا ويخاول ف «Lhd 15] SLI ILM‏ تحفه مرة أخرف: كم Bye‏ آخري. وبعد العديد من GALA‏ مجموعة بيانات التدريب: 
سيبدأ في تصحيح الأمور أكثر وأكثر وسيتمكن من التعامل مع مجموعة بيانات الاختبار. 


عندما يتعلم الطالبء يخبرنا ale‏ الأعصاب أن الموصلات داخل الدماغ تتغير؛ فتقوى بعض التشابكات العصبية بين الخلايا 
العصبية وبعضها يضعف وبعضها الآخر يموت. لا يوجد Ble‏ مباشر للخلية العصبية الاصطناعية. ولكن يحدث شيء مماثل. 
تذكرمرة i‏ أن سلوك الغلية العضبية يعتمد على Lelighs Lede‏ واتحيازها. ليس لديا ees‏ المدخلات لأها تا ن 
البيئة. ولكن يمكننا تغيير قيم الأوزان والانحياز. وهذا ما يحدث في الحقيقة. فنحن نُحيّث قيم الأوزان والانحياز بطريقة تجعل 
الخلية العصبية تقلّل من أخطاتها. 


الطريقة التي تستخدمها الخلية العصبية لتحقيق ذلك هي الاستفادة من ميزة طبيعة المهمة المطالبة بإنجازها. فنحن نريدها 
أن تأخذ كل ملاحظة وتحسب مُخرجًا äg‏ للفئةء وتعدل أوزانها وانحيازها لتقليل الخسارة. إذنء تحاول الخلية العصبية Qo‏ 
مسألة من مسائل «الحد الأدنى». Elu‏ على المدخلات والمخرجات التي تنتجهاء تكون المسألة هيكيف UJ‏ أن نعيد معايرة الأوزان 
والانحياز لتقليل الخسارة ؟ 


فيما سبق وصفنا الخلية العصبية بأنها شيء يأخذ بعض المدخلات وبحوّلها إلى مُخرج. إذن فالخلية العصبية بهذا المعنى» هي 
عبارة عن دالة كبيرة تأخذ مدخلاتها وتطيّق قيم الأوزان وتجمع حواصل الضرب وتجمع الانحياز وتمرّر النتيجة عبر دالة 
التنشيط ثم تعطي المخرج النهائي. ولكن إذا فكّرنا بطريقة أخرىء نجد أن المدخلات والمخرجات محدّدة بالفعل (تلك هي 
مجموعة بيانات التدريب)ء بينما ما يمكننا تغييره هو الأوزان والانحياز. ومن تم يمكننا اعتبار الخلية العصبية Leb‏ دالة تتكوّن 
متغيراتها من «الأوزان والانحياز»؛ لأننا لا نستطيع التأثير إلا في هذه القيم» ونريد أن نغيّرها مع كل مُدخل للحد من الخسارة. 
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على سبيل المثال إذا bisi‏ خلية عصبية بسيطة» لها وزن واحد وليس لها انحيازء فقد تكون العلاقة بين الخسارة والوزن كما 
كما موضح بالشكل أدناه في الجزء الأيسر ؛ ليوضح المنحنى السميك الخسارة في صورة Ula‏ وزن chee JR ad‏ ينبغي أن تعدّل 
الخلية العصبية وزنها بحيث تصل إلى أقل قيمة للدالة. بالنسبة إلى المدخل المعطى» تشتمل الخلية العصبية Ú‏ على خسارة 
في النقطة المشار Le‏ 


الجدير بالذكر أن الخلية العصبية لا تعرف الوزن المثالي الذي من شأنه تقليل الخسارة لكن الشيء الوحيد الذي تعرفه هو 
قيمة الدالة عند النقطة المشار إليها وقد لا تعدّل الخلية العصبية الوزن إلا بقدر ضئيل سواء بزبادة القيمة أو خفضها بحيث 
تقترب من الحد الأدنى. 


ولمعرفة ما ينبغي dled‏ سواء برفع قيمة الوزن أو خفضهاء من الممكن أن توجد الخلية العصبية خط المماس عند النقطة 
الحالية. بعد ذلك يمكنها حساب ميل خط المماس؛ وهي الزاوية مع المحور الأفقي الموضحة Gayl‏ في الشكل. لاحظ أن الخلية 
العصبية يمكنها إجراء تلك العملية الحسابية دون أي إمكانيات خاصة سوى قدرتها على تنفيذ عمليات حسابية عند النقطة 


الموضعية. 


ميل خط المماس سالب؛ لأن الزاوية في اتجاه دوران عقارب الساعة. يوضح الميل «معدل التغيير في الدالة»؛ ومن ثم يشير الميل 
السالب إلى أنه مع زيادة الوزن» تقل الخسارة. عندئذٍ تكتشف الخلية العصبية أنه لتقليل الخسارةء ينبغي أن تتحرك إلى اليمين. 
وبما أن الميل سالب والتغيير المطلوب في الوزن موجبء تجد الخلية العصبية أنه لا بد من تحريك الوزن في اتجاه موجب؛ أي 
اتجاه معاكس لما يشير إليه الميل. 


ننتقل الآن إلى الشكل جهة اليمين فى الشكل السابق. تقع الخلية العصبية هذه المرة جهة اليمين من الحد الأدنى للخسارة. تأخذ 
الخلية خط المماس مرة أخرى وتحسب ميله. قيمة الزاوية موجبة» ومن نّم تكون قيمة الميل موجبة أيضًا. يشير الميل الموجب 
إلى أن زيادة الوزن تؤدي إلى زيادة الخسارة. عندئذٍ تعلم الخلية العصبية أنه chan‏ خفض قيمة الوزن لتقليل الخسارة. Lag‏ 
أن الميل موجب والتغيير المطلوب في الوزن سالب» تجد الخلية العصبية مرة أخرى ضرورة التحرك في الاتجاه المعاكس للاتجاه 
الذي يشير إليه الميل. 
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لا تحتوي الخلية العصبية Sale‏ على وزن واحدء بل على عدة أوزان بالإضافة إلى الانحياز. ولمعرفة كيفية تعديل كل وزن على 
حدة وتعديل الانحيازء تبداً الخلية العصبية مثلما ذكرنا في مثال الوزن الواحد. بمصطلحات رياضيةء تحسب الخلية ما A‏ 
ب«المشتقة الجزئية» للخسارة بالنسبة إلى كل وزن فردي والانحياز. بالنسبة إلى العدد ١‏ من الأوزان والانحياز» ستكون 7+1 من 
المشتقات الجزئية إجمالًا. يطلق على المتجه الذي يتضِمّن كل المشتقات الجزئية للدالة اسم «chase‏ الدالة. والتدرُج هو مرادف 
الميل عندما يكون لدينا دالة متعددة المتغيرات؛ إنه يحدد الاتجاه الذي ينبغي أن نتبعه لزيادة قيمة الدالة. ولتقليل قيمة 
الدالةء نسير في الاتجاه المعاكس. لذا لتقليل الخسارةء تحدّث الخلية العصبية كل وزن والانحياز في الاتجاه المعاكس لما تشير 
إليه المشتقات الجزئية التي تشكّل تديجها. 


في الحقيقة لا تجرى العمليات الحسابية برسم خطوط المماس وقياس الزوايا. توجد طرق فعالة لإيجاد المشتقات الجزئية 
والتدرج» ولكن لا داعي للخوض في تفاصيلها فى الوقت الحالى. الهم هو أن لدينا طريقة محدّدة لتعديل الأوزان والانحياز من 
أجل تحسين نتائج الخلية العصبية. وبذلك» يمكن وصف عملية التعلم بالخوارزمية التالية: 


بالنسبة إلى كل مدخل وكل مُخرج مطلوب في مجموعة بيانات التدريب: 


eaa (0)‏ فشن AES‏ العصبية ESOS Ce‏ 
(Y)‏ تحدّث قيم الأوزان والانحياز للخلية العصبية لتقليل الخسارة. 


بمجرد الانتهاء من التدريب بالاطلاع على كل البيانات المدرجة في مجموعة بيانات التدريب» نقول Lis]‏ قد أكملنا «مرحلة». لكننا 
لا نتوقف عند هذا الحد Bole‏ فالعملية تُعاد كاملة Bae‏ مرات؛ إن الأمر أشبه بالطالب حينما يعيد مذاكرة المادة كلها من 
جديد بعد الاطلاع Lole‏ كاملة. ومن المتوقع أن يحرز تحسنًا في المرة القادمة؛ لأنه هذه المرة لا يبدأ من الصفر إذ لم Male A‏ 
بالمادة لأنه ra pfas‏ بالفعل من المرحلة السابقة. 


كلما 55S‏ التدريب بإضافة مراحل إلى نظام التدريبء يزيد الفهم لبيانات التدريب. لكن الإفراط في التدريب قد يكون ÚA‏ 
سيئًا. فالطالب الذي يدرس مجموعة المسائل نفسها مرارًا ريما سيتعلم Ld‏ من جذورهاء دون أن يعرف كيفية حل أي مسائل 
LS oaa ot Gea ol Gs‏ حزق ذلك معدت Lotte‏ فمل Mae Manus gti alo‏ افشلا دريكا ف الاتسانات, فق ته 
LATI‏ عندما ندرّب الكمبيوتر على مجموعة معينة من بيانات التدريب» نقول إن التدريب «مناسب» للبيانات. أما التدريب 
المفرط فيؤدي إلى ما يسكى «فرط الاستعداد»: أي الإتيان slab‏ ممتاز في مجموعة بيانات التدريب وأداء سيئ في مجموعة بيانات 
الاختبار. 


الخلية العصبيةء باتباع هذه الخوارزمية» يمكن أن تتعلّم تصنيف أي بيانات «يمكن الفصل Lay‏ خطيًا». إذا كان للبيانات 
colas‏ فهذا يعني أنه ينبغي الفصل بينها بخط مستقيم. أما إذا كان للبيانات Glow‏ 5,21( وليس فقط edd «(x2 x1)‏ 
المبدأ. بالنسبة إلى البيانات الثلاثية الأبعاد أي ثلاثة مدخلات (x3 (x2 (x1)‏ يمكن الفصل بينها خطيًا إذا كان يمكن الفصل 
بينها بمستوّى بسيط في الفضاء الثلاثي الأبعاد. Lei‏ حال وجود مزيد من الأبعاد. فنطلق على GU‏ للخط والمستوى اسم 
«المستوى الفائق». 


87 


في نماية التدريب» تكون الخلية العصبية قد تعلّمت الفصل بين البيانات. وكلمة «تعلّمت» هنا تعني أن الخلية العصبية وجدت 
الأوزان والانحياز المناسبين بالطريقة التي ذكرناها؛ أي بدأت بقيم عشوائية ثم حدّثها تدريجيًا؛ ومن تم قلّت الخسارة. 


w, = 0.92 


لا يحدث هذا دومًا. فالخلية العصبية المفردة التي تعمل بمفردها يمكنها تنفيذ مهام محدّدة فقطء مثل تصنيف البيانات 
القابلة للفصل خطيًا. وللتعامل مع مهام أعقدَء نحتاج أن ننتقل من خلية عصبية اصطناعية وحيدة إلى شبكات الخلايا 
العصبية. 


الشبكات العصبية الاصطناعية: 


تكون الشبكة العصبية مثل الدماغ البشري من خلايا عصبية (artificial neuron)4eUla sel‏ « تُعرف al‏ باسم العقد 
.(000)هذه العقد مكدسة بجانب بعضها البعض في ثلاث طبقات: 


Input Layer طبقة الادخال‎ © 
Hidden Layer الطبقة المخفية‎ e 


Output Layer طبقة الاخراج‎ © 


Bias 
p^ as os 
Input 2 4 Step 1 N 7 Step2 5 
/ ` / s 
١ y cT p-------- MM 
1 1 
n \ Ms N 
مي م‎ uuu 
bx wxi i E a 
\ i=] / ti 2d 
/ (eniti Mk / 


1١ 
bj 7 4 
39 E 5 » Output 
© ei ms ^ ~ - 


+ i 
Transfer Function Activation Function 


توفر البيانات لكل عقدة (node)‏ معلومات في شكل مدخلات (inputs).‏ تضاعف العقدة المدخلات بأوزان عشوائية وتحسها 
وتضيف انحيارًا asi (bias).‏ يتم تطبيق الدالات غير Aust)‏ والمعروفة أيضًا باسم دالات «(activation functions) hail‏ 
لتحديد أي خلية عصبية (neuron)‏ يجب إطلاقها. 


فالامر مثله كما في الشبكات العصبية الحيويةء يمكننا بناء شبكة عصبية اصطناعية من LYE‏ عصبية مترابطة. يمكن ربط 
إشارات المدخلات لخلية عصبية بمخرجات LYS‏ عصبية أخرى»ء ويمكن أن ترتبط إشارة مخرجاتها بمدخلات خلايا عصبية 
أخرى. بهذه الطريقة يمكننا إنشاء شبكات عصبية كالتالية: 


cis‏ الخلايا العصبية لهذه الشبكة العصبية الاصطناعية في شكل طبقات. وغالبًا ما يكون هذا هو المتّبع في التطبيق العملي؛ 
حيث يتشكل العديد من الشبكات العصبية التي ننشئها من طبقات من الخلايا العصبيةء كل طبقة بجوار الطبقة السابقة Ad‏ 
كذلك جعلنا كل الخلايا العصبية في إحدى الطبقات متصلةً بكل الخلايا العصبية في الطبقة التاليةء مع التحرُك من اليسار 
إلى اليمين. مرة أخرىء تلك الطريقة شائعة على الرغم من عدم ضرورتها. عندما يكون لدينا طبقات متصلة بتلك الطريقةء 
نطلق Lele‏ «طبقات كثيفة الاتصال». 


على الرغم من أن الطبقة الأولى ليست متصلة بأي طبقة سابقةء فإن مخرجات الطبقة الأخيرة ليست مرتبطة بأي طبقة لاحقة 
بالمثل. فمخرجات الطبقة الأخيرة هي مخرجات الشبكة (USS‏ ومن نّم سوف توفِر القيم التي نريد حسابها. 


لنرجغ إلى مهمة التصنيف. تدور المسألة الآن حول الفصل بين مجموعتين من البيانات موضحتين في الشكل العلوي مما يلي. 
تقع البيانات في دوائرٌ متحدة المركز. واضح للجميع أن البيانات تنتمي لمجموعتين مختلفتين. وواضح Gaul‏ أنه لا يمكن فصل 
المجموعتين خطيًا؛ فلا يمكن dax)‏ مستقيم أن يفصل بين الفئتين. لذا نريد إنشاء شبكة عصبية تستطيع التمييز بين 
المجموعتين بحيث تخبرنا إلى أي مجموعة ستنتمي أي ملاحظة مستقبلية. هذا ما تراه في الشكل السفلي. بالنسبة إلى أي ملاحظة 
في الخلفية ذات اللون الفاتح» ستدرك الشبكة العصبية Lal‏ تنتمي إلى إحدى المجموعتين؛ وبالنسبة إلى أي ملاحظة في الخلفية 
ذات اللون القاتم» ستخبرنا Lol‏ تنتمي إلى المجموعة الأخرى. 


89 


للوصول إلى النتائج التي نراها في الشكل الاسفل نتبع الاتى : 
Ad as ©‏ طبعة تلو SS‏ 
© نضع خليتين عصبيتين في طبقة المدخلات» خلية لكل Gla!‏ للبيانات. 


© نضيف dae‏ من أربع خلايا عصبية كثيفة الاتصال بطبقة المدخلات. ونظرًا GY‏ هذه الطبقة ليست متصلة 
بالمدخلات أو المخرجات. فتكون طبقة مخفية. 


© نضيف طبقةً مخفية من خليتين عصبيتين مكتّفة الاتصال بالطبقة المخفية الأول. 


O‏ ننمي بناء الشبكة بطبقة مخرجات مكونة من خلية عصبية واحدة وكثيفة الاتصال بالطبقة المخفية الأخيرة. 
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عارضة بذلك اعتقادها بأن البيانات تقع ضمن إحدى المجموعتين أو الأخرى. 


e‏ نأخذ تلك القيمة ونحوّلها إلى قرار ثنائي إجابة تحتمل نعم أو لا flu‏ على إذا ما كانت تتجاوز ٠,٠‏ أم لا. 


خوارزمية الانتشار العكمي: 


في البدايةء لا تعرف الشبكة العصبية ld‏ ولا يحدث تعديل؛ ومن e$‏ نبدأ بأوزان وانحيازات عشوائية. بعد ذلك نعطي 
الشبكة العصبية ملاحظة من البيانات التي معنا؛ أي مجموعة من الإحداثيات. سينتقل الإحداثيان x2 9 x1‏ إلى طبقة المدخلات. 
تأخذ UIS‏ الخليتين العصبيتين القيم X29 X1‏ وتمررانها باعتبارها مخرجاتهما إلى الطبقة المخفية الأولى. تحسب الخلايا 
العصبية الأربع في تلك الطبقة جميعًا مخرجاتهاء وترسلها إلى الطبقة المخفية الثانية كل في دورها. ترسل الخلايا العصبية في 
تلك الطبقة مخرجاتا إلى الخلية العصبية في طبقة cole ell‏ التي تنتج قيمة المخرجات النهائية للشبكة العصبية. مع audi‏ 
العمليات الحسابية من طبقة إلى أخرىء تنشر الشبكة العصبية نتائج الخلايا العصبية للأمام من طبقة المدخلات إلى طبقة 
المخرجات: 
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بمجرد الوصول إلى طبقة المخرجات» نحسب الخسارة مثلما فعلنا مع الخلية العصبية المفردة. وعندئنٍ لا نعيّل قيم الأوزان 
والانحياز لخلية عصبية واحدة فحسب» بل للخلايا العصبية كافة في الشبكة من أجل تقليل الخسارة. 


يتين أنه يمكن القيام بذلك بالتحزك ف الانجاة المعاكس بحيت نجه من طيقة المخرجات إلى طيقة المدخلات. وبمجود أن 
نعرف قيمة الخسارة» يمكننا تحديث قيم الأوزان والانحياز للخلايا العصبية في طبقة المخرجات ؛ بعد تحديث قيم الخلايا 
العصبية في طبقة المخرجات» يمكننا تحديث قيم الأوزان والانحياز للخلايا العصبية في الطبقة التي قبلها؛ أي الطبقة المخفية 
الأخيرة. بعد الانتهاء من ذلك» يمكننا تحديث قيم الأوزان والانحياز في الطبقة التي قبلها؛ أي الطبقة المخفية قبل الأخيرة. وهكذا 
إلى أن نصل إلى طبقة المدخلات. 
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طريقة تحديث قيم الأوزان والانحياز للخلايا العصبية مماثلة لطريقة تحديثها في الخلية العصبية المفردة. مرة أخرى. تحسب 
التحديثات بتاءٌ على المشتقات الرياضية. يمكن di‏ شبكة عصبية كاملة كدالة كبيرة calis‏ متغيراتها من قيم الأوزان 
والانحياز لكل الخلايا العصبية. بعد ذلك» يمكن حساب مشتقة كل وزن وانحياز فيما Gat‏ بالخسارةء واستخدام تلك 
اللقعمة cyte!‏ الغلية العصيية alla‏ فصل إل wes‏ عملية التعلم ق الشنيكات الحضبية IT‏ وهو"خوارزنية الانتشار 
العكبى". 


بالنسبة إلى كل مُدخل والمخرج المطلوب: 
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© تحسب المخرجات والخسارة في الشبكة العصبية المتقدمة طبقةً تلو الأخرى بحيث نتقدّم إلى الأمام من طبقة المدخلات 
إلى طبقة المخرجات. 
© تُحدَّث قيم الأوزان والانحياز لتقليل c) Lal‏ بحيث نسير بترتيب عكبي من طبقة المخرجات إلى طبقة المدخلات. 


باستخدام خوارزمية الانتشار العكسي» يمكننا بناء شبكات عصبية معقّدة Les io‏ على تنفيذ مهاه مختلفة. فأنظمة التعلم العميق 
البسيطة عبارة عن خلايا عصبية اصطناعية بقدرات حسابية محدودة؛ إذ تأخذ المدخلات وتضرما في الأوزان وتجمعها ثم تضيف 
قيمة الانحياز ثم تطبّق إحدى دوال التنشيط على القيمة الناتجة. بينما تستمد هذه الخلايا للشبكات المعقدة قوّتها من الربط بين 
الكثير والكثير منها بطرق خاصةء حيث يمكن تدريب الشبكات الناتجة لتنفيذ المهمة التي نريد منها تنفيذها. 
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الفصل الرابع :أنواع الشبكات العصبية الاصطناعية 
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مقدمة: 


هناك العديد من أنواع الشبكات العصبية التى تستخدم فى التعلم العميق يمكن ذكر اشهرها على النحو التالى : 


Ö BockFed input cet 

[ inputceu 

® Noisy Input Cell 

| Hidden cou 

|) Provariistic Hidden ceu 
[ spiking Ter 
| ocn 

| mater input Output Cell 
| Aecurrent cell 

| memory cel 

@ ditterent Memory Celt 
©) Kernel 


© Convolution or Poot 


Perceptron (P) 


oo eee oe” 


Recurrent Neural Network (RNN) Long / Short Term Memory (LSTM) Gated Recurrent Unit (GRU) 
A Q e O م‎ 


Auto Encoder (AE) Variational AE (VAE) 


الشبكات العصبية (CNNs) à Sl]‏ 
الشبكات العصبية (RNNs) à; Sl‏ 
شبكات الذاكرة طويلة (LSTMs) gah!‏ 
شبكات الخصومة التوليدية (GANS)‏ 
شبكات وظيفة الأساس الشعاعي (RBFNs)‏ 
بيرسيبترون متعدد الطبقات (MLPs)‏ 
خرائط التنظيم الذاتي (SOMs)‏ 

شبكات المعتقدات العميقة (DBNs)‏ 

آلات Boltzmann‏ المقيدة (RBMs)‏ 
أجهزة التشفير التلقائي (Autoencoders)‏ 
شبكات هوبفيلد العصبية Hopfield Neural Networks( HNN)‏ 
شبكات Q‏ العميقة(0Q۸)‏ 
الشبكات العصبية المغذية(ئ۴N۸)‏ 


A mostly complete chort of 


Neural Networks ......... 


©2016 Fyodor van Veen - aaimoviestitute org 


Feed Forward (FF) Radial Basis Network (RBF) 


Denoising AE (DAE) 


Sparse AE (SAE) 


(CNNs)& i SUI الشبكات العصبية‎ -1 


CNN‏ عبارة عن شبكة عصبية متعددة الطبقات ذات بنية فريدة مصممة Ganas‏ لاستخراج ميزات البيانات المعقدة بشكل 
متزايد في كل طبقة وتعد شبكات CNN‏ مناسبة تمامًا للمهام الإدراكية. تعرف ConvNetsaul‏ . طورها يان لتكون AS LA Sol‏ 
CNN‏ عام 1988 و أطلق Lele‏ اسم LeNet.‏ وكان الغرض الاسامى منها استخدامها للتعرف على الأحرف مثل الرموز البريدية 
والأرقام. وتتكون من طبقات متعددة وتستخدم هذه الخوارزمية وظيفة تسمى الالتواء المفهوم الكامن وراءها هو أنه بدلاً من 
ربط كل خلية عصبية بجميع الخلايا التي تليهاء فإننا نريطها بحفنة منها فقط (المجال الاستقبالي). 


بطريقة ماء يحاولون تنظيم شبكات التغذية الأمامية لتجنب التجهيز الزائد (عندما يتعلم النموذج فقط البيانات التي تم 
عرضها مسبقًا ولا يمكنه التعميم)ء مما يجعلها جيدة جدًا في تحديد العلاقات المكانية بين البيانات. 


o 

o 

o 

o 

o 

o 

o 

o 

o 

1 & " 0 o 
convolution * nonlinearity max pooling e 
o 

convolution + pooling layers fully connected layers 


تتكون الصور من وحدات البكسل التي تحدد شدة البياض في الصورة .كل بكسل من الصورة هو ميزة سيتم تغذيتها AS LA‏ 
العصبية .على سبيل JUU‏ تشير الصورة مقاس 128x128‏ إلى أن الصورة مكونة من 16384 بكسل أو ميزات .سيتم تغذيته 
كمتجه بحجم 16384 للشبكة العصبية .بالنسبة للصور الملونةء هناك 3 قنوات (واحدة لكل Lia‏ - الأحمر والأزرق 
والأخضر) .في هذه الحالةء نفس الصورة الملونة ستكون بحجم 3x128x128‏ بكسل. 
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224x224x3 224 x 224 x 64 


€ convolution+ReLU 
E max pooling 

2 fully connected+ReLU 
€ softmax 


هناك تسلسل هرمي في طبقات CNN.‏ تحاول الطبقة الأولى استخراج الميزات الأولية للصور مثل الحواف الأفقية أو 
الرأسية .تستخرج الطبقات الثانية المزيد من الرؤى من الميزات التي تستخرجها الطبقة الأولى .ستتعمق الطبقات التالية بعد 
ذلك بشكل أعمق في التفاصيل لتحديد أجزاء معينة من الصورة مثل الشعر والجلد والأنف وما إلى ذلك. وأخيرّاء ستصنف 
الطبقة الأخيرة الصورة المدخلة على Lol‏ صورة إنسان أو قطة أو كلب وما إلى ذلك. 


eal‏ استخداماتها: 
تستخدم بشكل أساسي لمعالجة الصور واكتشاف الأشياء. ونُستخدم شبكات CNN‏ على نطاق واسع لتحديد صور الأقمار 
الصناعية ومعالجة الصور الطبية وتوقع السلاسل الزمنية واكتشاف الحالات الشاذة والسيارات ذاتية القيادة . 


كيف تعمل CNNGI&LA‏ ؟ 


تحتوي شبكات CNN‏ على طبقات متعددة تقوم بتجبيزواستخراج الخصائص من البيانات: 

طبقة التفاف CNN convolutional layer):‏ ( تحتوى هذه ARN I‏ على Bae‏ مرشحات لأداء عملية الالتفاف. 

الوحدة الخطية المصححة (ReLU)‏ : لدى CNN‏ طبقة ReLU‏ لإجراء عمليات على العناصر. الناتج هو خريطة معالم 
مصححة. 

طبقة التجميع pooling layer)‏ ): تغذي خريطة المعالم المصححة بعد ذلك طبقة التجميع. التجميع هو عملية أخذ عينات 
laa‏ تعمل على تقايل أبعاد خريظة المغالم تقوم طبقة المجميع بسن ذلك تعويل oaa‏ الأبغاق الاجا من 
خريظة الام Anas]‏ إل dey Jas Ante‏ ونال موعن Ax Gyo‏ 

طبقة متصلة بالكامل (fully connected layer)‏ : تتشكل طبقة متصلة بالكامل عندما يتم تغذية المصفوفة المسطحة من 
طبقة التجميع كمدخلات, والتي تصنف الصور وتحددها. 
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Input 2 


- - ctm, 


` 
g” Stepl ^ 7° Step2 * 
/ / M 


s 4 iN ^ 
37 P. S ت‎ Output 
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+ + 
Transfer Function Activation Function 


(RNNs)à; SA الشبكات العصبية‎ -2 


كم aaa‏ الشبكات الحطبية المتكررة للتمامل هم est‏ اللتسابيلة oa LL Lat eal‏ البيانات الى ليا يعض 
الارتباط مع البيانات السابقة مثل النض تسلسل الكلمات والجمل وما إلى ذلك أو مقاطع الفيديو تسلسل الصور والكلام وما 
إلى ذلك. من المهم جدًا فهم العلاقة بين هذه الكيانات المتسلسلة, والا فلن يكون من المنطقي خلط الفقرة بأكملها ومحاولة 
استخلاص بعض gall‏ منها . 
تم تصميم شبكات RNN‏ لمعالجة هذه الكيانات المتسلسلة .من الأمثلة الجيدة على استخدام شبكات RNN‏ هو الإنشاء 
التلقائي للترجمات في YouTube.‏ إنه ليس سوى التعرف التلقائي على الكلام الذي يتم تنفيذه باستخدام.RNNs‏ 
يتمثل الاختلاف الرئيسي بين الشبكات العصبية العادية والشبكات العصبية المتكررة في أن بيانات الإدخال تتدفق عبر بعدين 
الوقت (على طول التسلسل لاستخراج الميزات منه) والعمق (الطبقات العصبية العادية). 
RNN‏ عبارة عن شبكة عصبية متعددة الطبقات يمكنها تخزين المعلومات في سياق العقد. مما يسمح لها بتعلم تسلسل 
البيانات وإخراج رقم أو آخرء إنها شبكات عصبية اصطناعية لها اتصالات بين الخلايا العصبية تشمل الحلقات. تعتبر RNNs‏ 
مناسبة تمامًا لمعالجة التسلسلات من المدخلات. 


Output 


Output sent back to itself 
RNN 
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هناك أنواع مختلفة من شبكات RNN‏ : 

متعدد إلى واحد - RNN:‏ في هذه البنيةء يكون الإدخال الذي يتم تغذيته للشبكة عبارة عن تسلسل ويكون الإخراج GUS‏ 
واحدًا .نُستخدم هذه البنية في معالجة مشكلات مثل تصنيف المشاعر أو للتنبؤ بدرجة المشاعر لبيانات الإدخال (مشكلة 
الانحدار) .ويمكن استخدامه Gaf‏ لتصنيف مقاطع الفيديو إلى فئات معينة. 

كثير إلى كثير - RNN:‏ يعتبر كل من المدخلات والمخرجات تسلسلات في هذه البنية. 

ويمكن تصنيفها Caryl‏ على أساس طول المدخلات والمخرجات على النحو التالى: 

نفس الطول: - تنتج الشبكة مخرجات في كل خطوة زمنية .هناك مراسلات فردية بين المدخلات والمخرجات في كل خطوة 
زمنية .يمكن استخدام هذه البنية كجزء من أداة تمييز الكلام حيث يتم وضع علامة على كل كلمة من التسلسل في الإدخال مع 
جزء الكلام الخاص بها كإخراج في كل خطوة زمنية. 

طول مختلف: - في هذه الحالة فإن طول المدخلات لا يساوي طول المخرجات .أحد استخدامات هذه البنية هو ترجمة 
اللغة .يمكن أن يختلف طول الجملة باللغة الإنجليزية عن الجملة البندية المقابلة. 

واحد إلى العديد -: الإدخال هنا هو كيان واحد بينما الإخراج عبارة عن تسلسل o Rad.‏ هذه الأنواع من الشبكات العصبية 
ليام مثل توليد الموسيقى والصور وما إلى AUS‏ 

واحد الى واحد( One to One RNN‏ ): هي شبكة عصبية تقليدية يكون فما الإدخال والإخراج كيانات فردية. 


^ PS ym 
5 q<o>> LJ i p 75 u ac» [ PL [] 
UN MS 1 ES 
x x x? <2>ير‎ y 
One to one One to many Many to one 
No i ge» gt LU 
1 
a> <+] [+] [+ .L] Voli oae E aae earl 
x4? x<2> e x<1> x<Tx> 
Many to many Many to many 


تحتوي RNN‏ على اتصالات تشكل دورات Ape ge‏ والتي تسمح بتغذية المخرجات من LSTM‏ كمدخلات إلى المرحلة الحالية. 
يصبح الإخراج من LSTM‏ مدخلاً إلى المرحلة الحالية ويمكنه حفظ المدخلات السابقة بسبب ذاكرته الداخلية. 


ويمكن تبسيط الفهم بأنها عبارة عن حلقة من الإخراج إلى الإدخال لتمرير المعلومات مرة أخرى إلى الشبكة .ولذلك» فى قادرة 
على تذكر البيانات السابقة واستخدام تلك المعلومات في التنبؤ بها. 
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استخداماتها: 

تعد الشبكات المتكررة مثالية للبيانات المرتبطة بالوقت ويتم استخدامها في تحليل السلاسل الزمنية و تُستخدم RNNs‏ 
بشكل شائع أيضاً لتسميات الصورء » ومعالجة اللغة Apa dell‏ والتعرف على خط dl‏ والترجمة AJY‏ 

تبدو RNN‏ غير المطوية كما يلي: 


Hidden state Output at time t 0 
at time t 
w w 


Input at time t 


كيف RNNs Josi‏ ؟ 


الإخراج في الوقت t1‏ يغذي المدخلات في الوقت t‏ وبالمثل . فإن المخرج في الوقت: يغذي المدخل في الوقت tH1.‏ 


يمكن ل RNNs‏ معالجة المدخلات بأي طول. 
A‏ 
c‏ >= 
B‏ 


حسابات الحساب للمعلومات التاريخيةء وحجم النموذج لا يزيد مع حجم الإدخال. 
فيما يلي Jlis‏ على كيفية عمل خاصية الإكمال التلقائي من:ءاع600 
Collection of vast volumes of‏ 
most frequently occurring‏ 


consecutive words 


Google 
How to copy a cell in Google =p 


Autocompletes 
the search 


Fed to the network 


Google search 


101 


3- شبكات الذاكرة طويلة (LSTMs) gah!‏ 


الشبكات العصبية باستخدام أساليب التعلم القائمة على التدرج مثل نزول التدرج العشوائي والانتشار 
العكسي .تدرجات وظيفة التنشيط هي المسؤولة عن تحديث أوزان الشبكات. 


شبكات RNN‏ هذه المشكلة عندما تواجه صعوبات في تعلم التبعيات طويلة المدى. 


تم تصميم شبكات الذاكرة طوبلة وقصيرة المدى (LSTM)‏ لمواجهة هذه المشكلة بالذات .يتكون LSTM‏ من وحدة ذاكرة 
يمكنها تخزين المعلومات ذات الصلة بالمعلومات السابقة .تعد الوحدات المتكررة المسورة (GRUS)‏ أيضًا Ég‏ مختلمًا من 


كلاهما يستخدم آلية النابضة لحل هذه المشكلة .تستخدم GRU‏ معلمات تدريب أقل وبالتالي تستخدم ذاكرة أقل من 
Las E STM.‏ يمكن وحدات GRU‏ من التدريب بشكل أسرع ولكن LSTM‏ توفر نتائج أكثر دقة عندما تكون تسلسلات 
الإدخال طويلة. 


كلهي نوع من الشبكات العصبية المتكررة RNN)‏ التي يمكنها تعلم وحفظ التبعيات طويلة المدى. حيث يتم استدعاء 
المعلومات السابقة لفترات ظويلة كسلوك الافتراضي: تحتفظ LSTMs‏ بالمعلومات بمرور الوقت. 

اهم استخداماتها 

تعتبر هذه الخوارزمية مفيدة في تنبؤ السلاسل الزمنية (time-series prediction)‏ لأنها تتذكر المدخلات السابقة. تمتلك 
35 ابنية تشبه السلسلة حيث تتواصل أربع طبقات متفاعلة بطريقة فريدة. إلى جانب تنبؤات السلاسل الزمنيةء وتُستخدم 
3 اعادةً للتعرف على الكلام وتكوين الموسيقى. 
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Generative Adversarial Network (GANs)2; uds شبكات الخصومة‎ -4 


صممت شبكات GAN‏ في عام 6 بواسطة إيان جودفيلو, وهي تعتمد على فكرة بسيطة يمكن توضيحها على النحو 
التالى : 


فشبكات GAN‏ هي خوارزميات التعلم العميق التوليدية التي تنشئ حالات بيانات جديدة تشبه بيانات التدريب. 
يحتوي GAN‏ على مكونين: 
© مولد (generator)‏ يتعلم إنشاء بيانات مزيفة. 
(discriminator) poo ©‏ يتعلم من تلك المعلومات الخاطئة. 


Real 
Samples i 


s^ مو[‎ OW 
“Correct? > 


Fak i 
A d i Fine Tune Training 


ee PNE‏ ييا ا و 
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Real Face 


Sampling 
—_—_ 
Discriminator 
ممعم‎ Convotetional Network (DON) 
$ 
X V/A S AN, 


i 
X499 —* Real or Fake ? 


Generator 


Deccnvntutional Network (DIN) 


Generated Face 


8 


Random noise 
| 


اهم استخداماتها: 
© يمكن استخدامبا لتحسين الصور الفلكية . 
يستخدمها مطورو ألعاب الفيديو لترقية التركيبات منخفضة الدقة وثنائية الأبعاد في ألعاب الفيديو القديمة عن 
طريق ale]‏ إنشائها بدقة 4 k‏ أو دقة أعلى من خلال التدريب على الصور. 
تساعد شبكات GAN‏ في إنشاء صور واقعية وشخصيات كرتونية. 
إنشاء صور فوتوغرافية لوجوه بشرية. 
© تقديم كائنات ثلاثية الأبعاد. 


طريقة عمل GANSKA‏ : 


يتعلم (discriminator) XA‏ التمييز بين البيانات المزيفة للمُنشئ وبيانات العينة الحقيقية. أثناء التدريب الأوليء يُنتج المولد 
بيانات مزيفة» وسرعان ما يتعلم المميّز أن يقول lel‏ خاطئة. 


n1‏ عم عم عم مم عم عم عم من من م ضام م سام 


Real Example 


Binary 
Classification 
Real/Fake 


Discriminator 
Model 


Generator 
Model 
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5- شبكات وظيفة الأساس (RBFNs) sleds!‏ 
ARBFNs‏ أنواع خاصة من الشبكات العصبية المغذية التي تستخدم وظائف الأساس الشعاعي كدالة التفعيل. لديهم طبقة 


€ RBFNs, oad كيف‎ 


تقوم RBENS‏ بإجراء التصنيف عن طريق قياس تشابه المدخلات مع أمثلة من مجموعة التدريب. 

تمتلك dæi RBFNs‏ إدخال gii‏ طبقة الإدخال. Led‏ طبقة من الخلايا العصبية RBF.‏ 

تبحث الدالة عن المجموع المرجح weighted sum)‏ ) للمدخلات» وتحتوي طبقة الإخراج على عقدة واحدة لكل فئة أو فئة 
من البيانات. 

تحتوي الخلايا العصبية في الطبقة المخفية على دالات النقل الغاوسي (Gaussian transfer)‏ والتي لها نواتج تتناسب:عكسياً 
مع المسافة من المركز. 

ناتج الشبكة عبارة عن مزيج خطي من دالات الأساس الشعاعي (radial-basis function)‏ للإدخال ومعلمات الخلايا 
العصبية. 


Input Vector 


Input Layer Hidden Layer 


(MLPs) clades! بيرسيبترون متعدد‎ -6 


تنتمي MLP‏ إلى فئة الشبكات العصبية الأمامية (feedforward neural networks)‏ ذات الطبقات المتعددة من الإدراك 
الح الى لبا رطاف MLP GS till‏ من oa] Adds‏ وظيقة )71,5 معصلة بالعامل لديا تفن الحو من colas‏ 
الإدخال والإخراج ولكن قد يكون لديا طبقات مخفية متعددة ويمكن استخدامها لبناء برامج التعرف على الكلام والتعرف 
على الصور والترجمة الآلية. 
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€ MLP oad كيف‎ 


تقوم MLP‏ بتغذية البيانات إلى طبقة الإدخال الخاصة بالشبكة. تتصل طبقات الخلايا العصبية في رسم بياني بحيث تمر 
الإشارة في اتجاه واحد. 

تحسب MLP‏ الإدخال بالأوزان الموجودة بين طبقة الإدخال والطبقات المخفية. 

تستخدم MLP‏ دالات التفعيل لتحديد العقد التي يتم إطلاقها. تتضمن دالات التفعيل ReLUs‏ والوظائف tanh. sigmoid‏ 
تقوم MLP‏ بتدريب النموذج على فهم الارتباط ومعرفة التبعيات بين المتغيرات المستقلة والمستهيدفة من مجموعة بيانات 
التدريب. 

يوجد أدناه مثال على MLP.‏ يحسب الرسم البياني الأوزان والتحيز ويطبق دالات التفعيل المناسبة لتصنيف صور القطط 
والكلاب. 


SSC ama 


CATS 


$9 xS 


Input Layer Hidden Layers Output Layer 


(SOMs) lI خرائط التنظيم‎ -7 


Lee‏ ار يسور عوقو lly « caiga‏ شع as vas‏ البياناك تتغليل ala‏ البيانات من خلال ISAT‏ العصبية 
الاصطناعية ذاتية التنظيم. 
يتم إنشاء SOMs‏ لمساعدة المستخدمين على فهم هذه المعلومات عالية الأبعاد. 


كيف تعمل SOM‏ € 


تقوم SOM‏ بتهيئة الأوزان لكل عقدة واختيار متجه عشوائيًا من بيانات التدريب. 

تقوم SOM‏ بفحص US‏ عقدة للعثور على الأوزان التي تكون على الأرجح متجه الإدخال. تسمى العقدة الفائزة أفضل وحدة 
مطابقة.(لا/ا8) 

يكتشف SOM‏ حي BMU‏ ويقل عدد الجيران بمرور الوقت. 

تمنح SOM‏ وزنًا فائرًا لمتجه العينة. كلما اقتربت العقدة من BMU‏ كلما تغير وزنها. 
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N. الخطوة الثانية للتكرار‎ SOM قل ما يتعلمه. كرر‎ BMU كلما كان الجار بعيدًا عن‎ e 
والتي تقوم بعد ذلك‎ « SOM, J| فى الشكل التالى رسمًا تخطيطيًا لمتجه الإدخال بألوان مختلفة. يتم تغذية هذه البيانات‎ 
أخيرّاء يفصل ويصنف الألوان المختلفة.‎ RGB. بتحويل البيانات إلى قيم ثنائية الأبعاد‎ 


D EH E 
z EN — 
و‎ y= 
E RGB 
RGB RGB RGB RGB 
Input data Segregates and categorizes 


SOM converts the data the different colors 
into 2D RGB values 


8- شبكات المعتقدات العميقة (DBNs)‏ 


ADBNs‏ نماذج توليدية (generative models)‏ تتكون من طبقات متعددة من المتغيرات العشوائية والكامنة. المتغيرات 
الكامنة (latent variables)‏ لها قيم ثنائية وتسمى غالبًا الوحدات المخفية. 

5 .عبارة عن كومة من آلات Boltzmann‏ مع وصلات بين الطبقات» وتتواصل كل طبقة RBM‏ مع كل من الطبقات 
السابقة واللاحقة. 

تُستخدم شبكات المعتقد العميق (DBNs)‏ للتعرف على الصوروالتعرف على الفيديووبيانات التقاط الحركة. 


$ DBN bead كيف‎ 


DBN. تدرب‎ (Greedy learning algorithms) خوارزميات‎ ° 

e‏ تستخدم الخوارثمية نبج طبقة تلو الأخرى لتعلم الأوزان التوليدية التنازلية. 

e‏ تقوم0ا08 بتشغيل خطوات أخذ عينات جيبس على الطبقتين المخفيتين العلويتين. 

e‏ ترسم هذه المرحلة عينة من RBM‏ التي تحددها الطبقتان المخفيتان العلويتان. 

ه سحب عينة DBN‏ من الوحدات المرئية باستخدام ممر واحد لأخذ العينات من خلال بقية النموذج. 

ه٠‏ تعلم DBN‏ أنه يمكن الاستدلال على قيم المتغيرات الكامنة في كل طبقة من خلال تمرير واحد من أسفل إلى أعلى. 
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كرك كك كم 
i RBMI | Input Layer |‏ 
bee ew ee‏ 
passas : Hidden Layer 1‏ 
RBM2 |‏ | 
1 ا 

Hidden Layer 2 
— 
| RBM3 | . 


Hidden Layer 3 
Output Layer 


a 


ae‏ س س سا 


© Backfed input Cell 


[EI 


[ Noisy input Cet 


[E ceu 


[ Provavistic Hidden Cell 


Deep Belief Network (DBN) 


^ Spiking Hidden Cell 
Y Ves". Ves". NG, 0 
Q (> Q (> 4 + o Match Input Output Cell 
NN 2 Oa names 
o Memory Celi 
| viec memory cell 
B keme 


© Convolution or Pool 


0 


(RBMs)sدyêkl‎ Boltzmann آلات‎ -9 


طورها جيفري هينتون» RBMs‏ هي شبكات عصبية عشوائيةغير حتمية ذات قدرات توليدية وتتعلم توزيع الاحتمالات على 
المدخلات .وهي شكل مقيد من آلة بولتزمان» مقيدة من حيث الترابطات بين العقد في الطبقة. 

تتضمن هذه الطبقات طبقتين فقط. أي الطبقة المرئية والطبقة المخفية .لا توجد aib‏ إخراج في RBM‏ والطبقات متصلة 
بالكامل ببعضها البعض . 


دُستخدم خوارزمية التعلم العميق هذه لتقليل الأبعاد والتصنيف والانحدار وتعلم الميزات ونمذجة الموضوع. 

تشكل البلوك القائمة على النتائج اللبنات الأساسية ل08۸ 

Visible units)) الوحدات مرئية‎ 

Hidden units)) الوحدات المخفية‎ 

كل وحدة مرئية متصلة بجميع الوحدات المخفية. تحتوي RBM‏ على وحدة تحيز (bias)‏ متصلة بجميع الوحدات المرئية 
والوحدات المخفيةء ولا تحتوي على عقد إخراج. 
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كيف تعمل RBM‏ € 


يتكون RBM‏ من مرحلتين: التمرير الأمامي (forward pass)‏ والتمرير الخلفي.(355م (backward‏ 

تقبل RBM‏ المدخلات وترجمتها إلى مجموعة من الأرقام التي تشفر المدخلات في التمرير الأمامي. 

تجمع RBM‏ بين كل مدخلات ووزن فردي وتحيز شامل واحد. 

تقوم الخوارزمية بتمرير الإخراج إلى الطبقة المخفية. 

في التمرير الخلفي» تأخذ RBM‏ تلك المجموعة من الأرقام وترجمتها لتشكيل المدخلات المعاد بناؤها. 

تجمع RBM‏ كل دالة تفعيل مع الوزن الفردي والتحيز الكلي وتمرير الإخراج إلى الطبقة المرئية لإعادة البناء. 
في الطبقة المرئيةء يقارن RBM‏ إعادة الإعمار مع المدخلات الأصلية لتحليل جودة النتيجة. 


Multiple Inputs 


visible hidden activation 
layer layer function 
x 
+b > / =a 
x 
input +b > / =a 
x 
+b > / =a 
x 
Wr ... W, 


(Autoencoders) 3L L1 أجهزة التشفير‎ -10 


تعد أجهزة التشفير التلقائي (Autoencoders)‏ نوعًا محددًا من الشبكة العصبية الأمامية (feedforward neural network)‏ 
التي يكون فيها المدخلات والمخرجات متطابقة. صمم جيفري هينتون أجهزة التشفير التلقائي في الثمانينيات لحل مشاكل 
التعلم دون ألإشراف (unsupervised learning).‏ وه عبارة عن شبكات عصبية مدربة تقوم بتكرار البيانات من طبقة 
الإدخال إلى طبقة الإخراج. 

تُستخدم أجهزة التشفيرالتلقائية لأهداف معينه مثل اكتشاف المستحضرات الطبية وتوقع الشعبية ومعالجة الصور. 


كيف تعمل أجهزة التشفير التلقاني (Autoencoders)‏ $ 


يتكون جهاز التشفير التلقائي من ثلاثة مكونات رئيسية: 
(encoder) eat! ©‏ . 
(code) 34,1 ©‏ . 
© وحدة فك (decoder). pái‏ . 
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تم تصميم أجهزة التشفير التلقائي لتلقي المدخلات وتحويلها إلى تمثيل مختلف. ثم تحاول إعادة بناء المدخلات الأصلية بأكبر 
عندما لا تكون صورة الرقم مرئية بوضوح » فإنها تتغذى على شبكة عصبية للتشفير التلقائي. 
تقوم أجهزة التشفير التلقائي Vol‏ بترميز الصورةء ثم تقليل حجم الإدخال إلى تمثيل أصغر. 


Encoder Decoder 


O nd 


11- شبكات shiga‏ العصبية Hopfield Neural Network‏ 
و تعتبر شبكة متصلة GLa‏ حيث ترتبط كل خلية .تُستخدم شبكات هوبفيلد في مهام التحسين و مهام تخزين البيانات 
بالإضافة إلى ذلك » يمكن أن تتعلم هذه الشبكات تخزين الأنماط و استردادها عند .عصبية JG‏ خلية عصبية أخرى 
تقديمها بإصدارات جزئية أو متدهورة من النمط. 
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12- الشبكات العصبية المغذية (FNNs)‏ 


الشبكات العصبية المغذية (FNNs)‏ هي نوع أساسي من الشبكات العصبية الاصطناعية حيث تتدفق المعلومات في اتجاه 
واحد» من طبقة الإدخال عبر الطبقات المخفية إلى طبقة الإخراج دون أي دورات .فبي متعددة الاستخدامات وقادرة على 
تقريب الوظائف المختلفةء وتستخدم بشكل شائع في حل مشكلات الانحدار والتصنيف في مهام التعلم JYI‏ والتعرف على 
الأنماط. 


o‏ الإيجابيات :بنية بسيطة. وأسهل في التدريب» ومناسبة للعديد من مهام التعلم الخاضعة للإشراف. 


© السلبيات :قد يواجه صعوبة في التعامل مع البيانات التسلسلية أو الزمنية وقد يتطلب معالجة مسبقة كبيرة 
للبيانات. 


Input layer Hidden layers Output layer 


" 
z 
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13- شبكات © (DQN)Aàzaa!l‏ 
Deep Q-Network (DQN)‏ خوارزمية التعلم المعزز التي تجمع بين التعلم العميق و Q-Learning‏ لحل مشكلات 
اتخاذ القرار المتسلسلة المعقدة .تم تقديم DQN‏ بواسطة DeepMind‏ في عام 2013 وحققت نجاحًا كبيرًا في مجالات 

مختلفةء بما في ذلك لعب ألعاب Atari‏ والتحكم في الروبوتات وتحسين تخصيص الموارد. 

€ DQN. choc كيفية‎ 

Q-learning:‏ تعتمد DQN‏ على >19 QLearningays}‏ « وهي شكل من أشكال التعلم المعزز Q-learning dig.‏ إلى تعلم 
السياسة المثلى للوكيل لتعظيم مكافأته التراكمية في بيئة معينة .ويحتفظ بجدول Q-value‏ الذي يخزن المكافآت 

المتوقعة لكل زوج من إجراءات الحالة. 

الشبكات العصبية العميقة :تستخدم DON‏ شبكات عصبية عميقةء وتحديدًا الشبكات العصبية التلافيفية 
العميقة(ء١N١))‏ . كمقربات للوظائف لتقدير قيم .0 المدخلات إلى الشبكة هي الحالة الحاليةء والمخرجات هي قيم © 
المتوقعة لجميع الإجراءات الممكنة في تلك الحالة. 

إعادة تشغيل التجربة :تستخدم DON‏ مخزنًا مؤقنًا Boley‏ تشغيل التجريةء والذي يخزن تجارب الوكيل التي تتكون 
من الحالة والإجراء والمكافأة وانتقالات الحالة التالية .أثناء التدريب» يتم أخذ عينات من مجموعات صغيرة من الخبرات 
بشكل عشوائي من المخزن المؤقت لإعادة التشغيل لإلغاء ربط البيانات التسلسلية وتحسين استقرار التعلم. 

الشبكة المستهدفة :تستخدم DQN‏ شبكة مستهدفة منفصلة وهي نسخة من الشبكة الرئيسية .يتم استخدام هذه 
الشبكة المستهدفة لحساب قيم © المستهدفة أثناء التدريب» بينما يتم استخدام الشبكة الرئيسية للتنبؤ بقيم .0 يتم 
تحديث معلمات الشبكة المستهدفة بشكل دوري لتتناسب مع معلمات الشبكة الرئيسيةء مما يقلل من مشكلة الهدف 
المتحرك للقيمة المستهدفة. 

التدريب :تستخدم خوارزمية DQN‏ دالة الخسارة التي تقلل الفرق بين قيم Q‏ المتوقعة وقيم Q‏ المستهيدفة .يتم حساب 
الخسارة باستخدام متوسط الخطأ التربيعي (MSE)‏ بين قيم Q‏ المتوقعة وقيم Q‏ المستهمدفة .يتم تحديث معلمات 
الشبكة العصبية العميقة من خلال الانتشار العكسي لتقليل هذه الخسارة. 

الاستكشاف مقابل الاستغلال :توازن DQN‏ بين الاستكشاف والاستغلال باستخدام سياسة إبسيلون الجشعة .أثناء 
التدريب» يختار الوكيل الإجراءات SIS‏ احتمالية الاستكشاف الأعلى (الإجراءات العشوائية) في البداية .مع تقدم 
التدريب» يقلل الوكيل تدريجيًا من الاستكشاف ويزيد من الاستغلال عن طريق اختيار الإجراءات بناءً على قيم Q‏ 
المستفادة. 

لقد أظهرت DQN‏ قدرات مميزة > حيث تجاوزت أداء المستوى البشري في العديد من ألعاب 2600 Atari‏ وحققت أحدث 
النتائج في العديد من مجالات التعلم المعزز .كما Lef‏ مهدت الطريق للتقدم في التعلم المعزز العميق وتطوير خوارزميات 
أكثر تطورًا مثل Double DQN‏ و Rainbow DQN. ¿Dueling DQN‏ 
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ومع ذلك. لدى DON‏ بعض القيود» بما في ذلك إمكانية المبالغة في تقدير قيم Q‏ والحساسية لاختيارات المعلمات 
الفائقة .اقترح الباحثون امتدادات وتحسينات مختلفة لمعالجة هذه القيود وتعزيز استقرار وأداء الخوارزمية. 

بشكل cale‏ تعد DON‏ خوارزمية بارزة للتعلم المعزز العميق أثبتت نجاحها في تعلم المهام المعقدة مباشرة من المدخلات 
الحسية الخام» مما يجعلها علامة بارزة في مجال الذكاء الاصطناعي والتعلم المعزز. 
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لفصل الخامس :أدوات الذكاء الاصطناعى الجيومكانى 
ببرنامج ArcGIS Pro‏ 
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مقدمة: 

قامث Esri‏ بتطوير آدوات وسير عمل للاستفادة من آحدت الأبتكارات فى التعلم العميق للإجاية على بحض AL‏ الضعبة في 
تطبيقات نظم المعلومات الجغرافية والاستشعار عن بعد. تعد رؤية الكمبيوترء أو قدرة أجهزة الكمبيوتر على اكتساب الفهم 
من الصور أو مقاطع الفيديو الرقميةء læa‏ يتحول من خوارزميات التعلم الآلي التقليدية إلى أساليب التعلم العميق. قبل 
تطبيق التعلم العميق على الصور في ArcGIS Pro‏ من ell‏ فهم التطبيقات المختلفة للتعلم العميق لرؤية الكمبيوتر. 
تطبيقات التعلم العميق لرؤية الكمبيوتر: 

مناك الهديل من مام رأة الكمبيجر aliia, Lashes Sos all‏ الشبكات المصيبية الل العميق:قاميك Esri‏ بقطوس 
أدوات تسمح لك بإجراء تصنيف الصور واكتشاف الكائنات والتجزئة الدلالية وتجزئة المثيلات. يتم وصف جميع مهام رؤبة 
ipsae‏ هذه ادناه سو lis Lye US‏ الس ارعن بع ومكال AST‏ عمومية ترف اکرش 

:) Image classification) تصنيف الصور‎ 

يتضمن تصنيف الصور تعيين تسمية أو فئة لصورة رقمية. على سبيل JEL‏ قد تحمل صورة الطائرة بدون طيار الموجودة 
غلى اليسان أدناه اسم "حش" وف ن تحمل الصبورة الرقفية الموجودة على Cual‏ اسم "Aaa"‏ مرف هدا التوع من cikan‏ 
ajar, Cal‏ الكافنات of‏ التعرف le‏ الطبون 549( استخد امه فى las‏ المملومات الجقراقية لصيف الميزات ق الصورة. 


:Object detection‏ (كشف الكائنات) 
اكتشاف الكائنات هو عملية تحديد موقع الميزات في الصورة. على سبيل SLL‏ في صورة الاستشعار عن بعد أدناه. وجدت 
الشبكة العصبية موقع طائرة. في حالة استخدام الرؤية الحاسوبية الأكثر عموميةء قد يكون النموذج قادرًا على اكتشاف موقع 
الحيوانات المختلفة. تتضمن هذه العملية Sale‏ رسم مربع محيط حول الميزات محل الاهتمام. ويمكن استخدامه في نظم 
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الميزات على الخريطة. 


Semantic segmentation: 
«JUL التجزئة الدلالية يحدث التجزئة الدلالية عندما يتم تصنيف كل بكسل في الصورة على أنه ينتعي إلى فئة ما. على سبيل‎ 
يتم تصنيف بكسلات الطريق بشكل منفصل عن بكسلات غير الطرق. على اليمين» يتم‎ coliai في الصورة الموجودة على اليسار‎ 
قات‎ di assa ينما كفي وتحداث اليكل اللعرى فى‎ «Aled Lal de فى الحو‎ Abad البكسل :الى تف‎ Shing تيف‎ 
أخرى. في نظم المعلومات الجغرافيةء يُشار إلى ذلك غالبًا باسم تصنيف البكسلء أو تجزئة الصورةء أو تصنيف الصور. وغالبًا‎ 


ما يتم استخدامه لإنشاء خرائط تصنيف استخدامات الأراضي. 


: Instance segmentation 
دقة للكشف عن الكائنات حيث يتم رسم حدود كل مثيل للكائن. على سبيل المثال» في الصورة‎ ASÍ يعد تجزئة المثيلات طريقة‎ 
يتم الكشف عن أسطح المنازلء بما في ذلك المخطط التفصيلي الدقيق لشكل السقف. على اليمين‎ coal الموجودة على اليسار‎ 
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يتم الكشف عن السيارات» ويمكنك 2585 الشكل المميز للسيارات. يُعرف هذا النوع من تطبيقات التعلم العميق d‏ بتجزئة 
الكائنات. 


:Panoptic segmentation 
توضح الصورة أدناه أن جميع وحدات‎ «JUL يجمع التجزئة البانوبتيكية بين التجزئة الدلالية وتجزئة المثيلات. على سبيل‎ 


ترجمة Image translation gsal‏ : 
ترجمة الصور هي مهمة ترجمة صورة من تمثيل أو نمط محتمل للمشهد إلى آخرء مثل تقليل الضوضاء أو الدقة الفائقة. على 
سبيل «SLL!‏ الصورة الموجودة على اليسار أدناه توضح الصورة الأصلية ذات الدقة المنخفضة» والصورة الموجودة على اليمين 


توضح نتيجة استخدام نموذج فائق الدقة. يُعرف هذا النوع من تطبيقات التعلم العميق sl‏ بالترجمة من صورة إلى صورة. 
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كشف Change detection paill‏ : 
يمكن لهام التعلم العميق لاكتشاف التغيير BLAIS)‏ التغييرات في الميزنات محل الاهتمام بين تاريخين وانشاء خريطة منطقية 
للتغيير. على سبيل JAL‏ الصورة على اليسار أدناه توضح تطويرًا سكنيًا منذ خمس سنوات» والصورة الوسطى توضح نفس 

التطور اليوم» والصورة على اليمين توضح خريطة التغيير المنطقية حيث المنازل الجديدة باللون الأبيض. 
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تجبيزات بيئة العمل: 
تحميل وتهيئة Deep Learning Data Frame‏ 


https://github.com/Esri/deep-learning- 


frameworks/blob/master/README.md?rmedium=links_esri_com_b_d&rsource=https%3A%2F%2Flinks.esri.com%2Fdeep- 


learning-framework-install 


Deep Learning Libraries Installers for ArcGIS 


© PyTorch 
= ا‎ T Kf keras 


Eoo» € ONNX 
g نعمت‎ T fast.ai 
TensorFlow spaCy 


ALLL Pers mnt mí Vus is aS AP Rr yt -a o 


يتم اختيار Data Frame‏ متوافقة مع نسخة البرنامج على coL‏ ؛ ثم عمل تحميل لها وبعد ذلك عمل ting‏ على الجهاز 
نتأكد من انها جاهزة للعمل داخل البرنامج 
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Package Manager 


Manage environments and packages for Python, R, and system libraries. 


E} Installed (390) E} Updates E} Add Packages (9017) arcgispro-py3-clone 
Info REI. ee 

Additional packages available for installation. 
Save Project 


deep x 


Save Project As 


cudnn te Version: 
Pork NVIDIA's cuDNN deep neural network acceleration library keras 
m Deep Learning Library for Theano and TensorFlow 
Licensing Deep Learning Library for Theano and TensorFlow "m Sii 
keras-applications 280 
Applications module of the Keras deep learning library 2.6.0 
243 


231 
224 
2.2.2 
keras-preprocessing 7 220 
Data preprocessing and data augmentation module of the Keras deep learning library Apache-20 


keras-gpu 
Deep Learning Library for Theano and TensorFlow 


Help 
: https://github.com/fchollet/keras 


mkl-dnn 
http://keras.io 


About Intel(R) Math Kernel Library for Deep Neural Networks (Intel(R) MKL-DNN) 


neon https://github.com/fchollet/keras‏ ینت 
Learning Resources Nervana's Python-based Deep Learning framework indi‏ 


pytorch te 
PyTorch is an optimized tensor library for deep learning using GPUs and CPUs 


torchvision lw 
Image and video datasets and models for torch deep learning 


يتم ding‏ بيئة العمل بالبرنامج والتأكد من كارت الشاشة به من خلال اتباع الخطوات الموجودة بالرابط التالى : 
https://learn.arcgis.com/en/projects/get-ready-for-deep-learning-in-arcgis-pro/‏ 


هناك مجموعة من ادوات الذكاء الاصطناعى الجيومكانى داخل برنامج ArcGISPro‏ 


4 mu Image Analyst lools 2 4 285 GeoAl Tools 
> وك‎ Change Detection 4 وك‎ Feature and Tabular Analysis 
> وك‎ Classification and Pattern Recognition E Predict Using AutoML 
Af Train Usi L 
> É Deep Learning Æ| Train Using AutoMI 
SU ١ 1 4 جك‎ Imagery Al 
^. Classify Objects Using Deep Learning Seo eee 
^. Classify Pixels Using Deep Learning & Train Using AutoDL 
^. Compute Accuracy For Object Detection 4 جك‎ Text Analysis 


A Detect Change Using Deep Learning 8 Clesstiy text Using Deep Leming 


< 1 i 8 Ef Extract Entities Using Deep Learning 
Detect Objects Using Deep Learning IF Train Entity Recognition Mod 

^ Export Training Data For Deep Learning & Train Text Classification Model 

=) Extract Features Using Al Models & Train Text Transformation Model 
^. Non Maximum Suppression M rom Text Using Deep Losing 


Ef Train Deep Learning Model 
E] Ep ng ’ Forecast Using Time Series Model 


' Train Time Series Forecasting Model 


E Train Using AutoDL 
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بالاضافة الى شريط أداوات داخل Imagery‏ 


MyProject2 | 
Imagery Share Help 
Je 
e 
oye 
Classification Classification Deep Learning 
Wizard Tools » Tools ¥ 


Image Classification 
| 
O — 


MyProject4 | Command Search (Ait Q Rasha 


Imagery Share Help 


Wizard Tools» 


Image Classificat hy . . 
1 2 Label Objects for Deep Learning 


Create and manage labeled objects for deep learning. 


Train Deep Learning Model 


Train deep learning model using an assisted workflow. 


Review Deep Learning Models 


Review deep learning model metrics. 


وفيما يلى شرح لاستخدامات هذا الشريط : 

:Label Object for Deep Learning‏ تستخدم لتسمية ال Features‏ التى لم يكن لبا مسميات واستخراج بيانات لتدريب 
نموذج الذكاء الاصطناعى ؛ ويتم العمل Le‏ على النحو التالى : 

بمجرد اختيار ها تظهر نافذة ؛ يتم اختيار New Image Collection Layer‏ ؛ ثم نضيف اسم للطبقة ونحدد مكان الحفظ . 
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Label Objects for Deep Learning 


Label using 
Layer name 
Land Use 


Imagery folder 


D:\deep\Lable 7] 
Include sub folders 


اضافة تصنيف جديد للمسميات عن طريق النقربالماوس الزرالأيمن واختيار Add‏ 


Image Classification 
Label Objects : Image 


يتم 


Add a new class to the schema. A 
sub-class can also be added under 
the selected parent class. 


Labeled Objects Export Training Data 


Pixels 6) 


Bu © © < | 2 | «| a , A 
New Schema | | 
+ Add New Class 
[E Edit Properties | Add New Class 


| && Selected 


ثم OK‏ تظهر النافذة التالية ؛ 


New Class 
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ثم يتم كتابة اسم class, JI‏ وتحديد اللون المطلوب يتم تكرار هذه العملية للمسميات المطلوبة 
كما موضح أدناه 


Image Classification ?« nx Image Classification 
Add New Class =! Add New Class 


Image Classification Tw0Xx 
Label Objects : Image =! 


ه -©ا| ©* | 2 | © © د لك 
New Schema‏ 4 
Wi Build‏ 
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يتم AI‏ عينات لكل Lage‏ على النحو الموضح: 
Image Classification ?«nxX‏ 
Label Objects : Image =!‏ 


Hue © Ra 
4 New Schema 

W Build 

Wl Roads 


<I 


Labeled Objects Export Training Data 


m Ls 

a Class Pixels (96) 
Wi Build 4.07 = 
Wi Build 5.61 
lll Roads 2.78 
Wi Road: 1.66 
lll Road: 178 
Wl Road: 4.14 
Wl Roads 3.92 
Wi Road: 1.04 
mu n--a- متناف‎ v 


ثم اختيار Run‏ 
من Export Traning Data‏ ؛ بتم تحديد مكتن حفظ بيانات التدريب وعمل التعديلات اللازمة ( حجم الصورة - نسبة 


التداخل المطلوبة " تم ضبطها على 0 أى لا اريد وجود تداخل " - اختيار النموذج المطلوب) 
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Image Classification 
Label Objects : Image z 


= كس‎ © ه١‎ < | 2 | « | ©- , 
4 New Schema 

Build 

IW Roads 


Labeled Objects | Export Training Data 


Tile Size X 256 + A 
— : 7 F 
Output No Feature Tiles  [ ] 1 1 
كديا‎ Daa Forma PASCAL Visual Object (v| ^ 
_ KITT Labels Rotation Angle 0 ^ 
PASCAL Visual Object Classes Reference System Map space " 
Classified Tiles = 
No Feature Tiles [] 
> Label Objects : Image | RCNN Masks -— p— 
_ Labeled Tiles 2 ormat PASCAL Visual Object ) ud 
Multi-labeled Tiles 
Export Tiles 
aliud | CycleGAN 


Imagenet 


واخيرا Run‏ نجد الملفات موجودة داخل مجلد حفظ البيانات 


ü > Traning Data vU | Sei 
^ 
Name Date modified 
5s 
| | images 4/2/2024 7:20 PM 
| | labels 4/2/2024 7:20 PM 
FE esri accumulated stats 4/2/2024 7:20 PM 
(B esri model definition 4/2/2024 7:20 PM 
5 3 
map 4/2/2024 7:20 PM 
stats 4/2/2024 7:20 PM 
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Ay‏ عبارة عن 


ملف للصور عبارة عن العينات التدريبية وملف للمسميات و ملف لل stats‏ يوجد به احصائية بعدد العينات المأخوذة 


وقيمة كل صنف " Class Value‏ " )1 للمبانى و 2 للطرق ). 


> images 
٠ labels 57 
- ^ Name 
J| map - Notepad Name u 
File Edit Format View Help | 000000000000.tfw 
kimages\@00000000000. tif labels Voo0000000000.xni Q9 000000000000 E 
n B i&| 000000000000 
images \000000000001.tif labels X000000000001.xml 00000000000 
images \000000000002.tif labels X000000000002.xml e 1 A 000000000001 .tfw 
images \@00000000003.tif labels 000000000003.xm1  @ 000000000002 — 1 
images \000000000004.tif 1abe1s\000000000004. xml [=] 000000000001 
images \000000000005.tif labels\00000000005. xml © 000000000003 m 
images \000000000006.tif labels V000000000006.xml  — @ 000000000004 000000000002.tfw 
images \000000000007.tif labels 000000000007 . 1 [=] 000000000002 
imagesV000000000008.tif labelsiG00000000008.xni Qe 000000000005 _ 
images \000000000009. tif labels V000000000009.xnl E 000000000006 ‘| 000000000003.tfw 
images \000000000010.tif labels 000000000010.xml — 
images\000000000011.tif 1abe1s\000000000011.xm1  @ 000000000007 [=] 000000000003 
images\000000000012.tif labels\000000000012.xml e 000000000008 A 000000000004.tfw 
images\000000000013.tif labels\000000000013. xml x 
images\000000000014.tif labels\000000000014.xm1  @ 000000000009 [=] 000000000004 
images\000000000015.tif labels\000000000015. xml = 
images\000000000016.tif labels V000000000016.xmi Qe 000000000010 000000000005.tfw 
images \000000000017.tif labels V000000000017.xml ^ (f$ 000000000011 =] 000000000005 
images \000000000018.tif labels V000000000018.xml = 
images\000000000019.tif labelsV000000000019.xm1  @ 000000000012 ^1 000000000006.tfw 
images \000000000020.tif labels X000000000020.xml 0000000000 = 
images\000000000021.tif labels V000000000021.xml e 8 (&| 000000000006 
Pa nnnnonnnnni 4 Ea 
< = J ES « 
C] stats - Notepad — LH 
File Edit Format View Help 
limages = 238 *4*256*256 
Class feature statistics: 
features - 240 
features per image - [min - 1, mean - 1.01, max - 2] 
classes - 2 
cls name cls value images features min size mean size max size 
Build 1 180 182 0.01 3.49 5.56 
Roads 2 58 58 0.01 2.77 5.56 


Train Deep Learning Model‏ : تستخدم لتدريب 3543 c‏ ذكاء اصطناعى من خلال البيانات التدريبية الى تم 


استخرجها من الاداة السابقة . 


Alt+Q) Rasha - Abd 


MyProject4 | P Comma: 
Tile Layer 
Deep Learning = 
Tools « z 


Label Objects for Deep Learning 
Create and manage labeled objects for deep learning. 


Train Deep Learning Model 
Train deep learning model using an assisted workflow. 


i, Review Deep Learning Models 


Review deep learning model metrics. 
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تظهر النافذة التالية 


Train Deep Learning Model ? ~ A X 
Get Started 


Train deep 
learning model 


ere 
a 


How would you like to train the model? 


®) Set the parameters automatically 


_) Set my own parameters 


يتم اختيار Next‏ يتم ادخال بيانات التدريب ومكان حفظ النموذج واختيار النموذج المطلوب تدريبك 
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Train Deep Learning Model ? ~ O X| 
© © 0 
Train 


(05 


Parameters Environments T] 


Input Training Data 


Pretrained Model 


Output Model 
C:\Users\DR-Rasha\Desktop\m 
Total Time Limit 
(Hours) 
AutoDL Mode 

Basic 
LI 


v Advanced Options v Advanced Options 
Neural Networks © 
X | CascadeRCNN 


CascadeRCNN [C Save Evaluated Models 
CascadeRPN 

DCN 

DETReg 

DynamicRCNN 

EmpiricalAttention 

FasterRCNN 


FCOS 
Cancel 


JODJDOOODCOOCOCQHCO! 


. Run وأخيرا‎ 


Home Share View 
IS / 8 
* ES] = ® | Moveto” % Delete ~ i Th 
— الا‎ 


V t] 
Pinto Quick Copy Paste — Bc toy GDR New 
access E NI =} ics: folder 
Clipboard Organize New 
ج‎ v ^ | | > ThisPC > Local Disk (D:) > deep > model 
^ 
Name 
yf Quick access 
| | ModelCharacteristics 
@ OneDrive |] model.dipk 
E This PC H1 eee 
model.pth 
ID 3D Objects r 


© model_metrics 
B Desktop 


:Review Deep Learning Model‏ تستخدم لمراجعة دقة نموذج التعلم العميق والذى تم تدريبه 
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Ew Bi ad Y v جاع رن ”لامر‎ | 227 Command »egrcn (AMEY, nasna - Apa 


Project Map Insert Analysis View Edit Imagery Share Help 


E Bo uw, n 


New Georeference Raster Function Change Classification Classification |Deep Learning 
Workspace Functions» Editor Detection» Wizard Tools» Tools E 
Ortho Mappi... | Alignment [s Analysis Image Classificat 
? D> Label Objects for Deep Learning 
Contents vox ERE Create and manage labeled objects for deep learning. 
h 
T port pv =) Train Deep Learning Model 
جع 2ه‎ ; Train deep learni del usi isted workflow. 
tz C3 Cd 4 Hi e its rain deep learning model using an assisted workflow. 
Drawing Order Review Deep Learning Models 


Review deep learning model metrics. 


“E Map 1‏ 
فباختيار الاداة تظهر النافذة التالية 


Image Classification ?« nx 


— | 


Deep Learning Model Reviewer = 


Model 
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النموذج المطلوب مراجعته والذى تم تدريبه مسبقا. 

نوع النموذج وفى هذه الحالة RCNN.‏ 

اسم الشبكة العصبية التى تم تدريبها مسبقا. 

معدل التعلم المستخدم في تدريب الشبكات العصبية. إذا لم تقم بتحديد القيمةء 
فسيتم حسابها بواسطة أداة التدريب. 

يعرض القسم رسمًا بيانيًا يوضح فقدان التدريب وفقدان التحقق من الصحة على 


مدار تدريب النموذج. 


تعرض المقاييس التالية لكل فئة: الدقة والاستدعاء ودرجة 


التدريب» وفقدان التحقق من cs all‏ والوقت» 


ومقاييس الأخرى 


v Epochs Details | 
EpoTraiiValiiTim: Other Metrics 
15 0.5 0.6, 00:١ "average precision": 0.2: 
16 0.5 0,6: 00:0 "average precision": 0. 
17 0,5! 0,6 00:١ "average precision": 0.2* 
18 0.5: 0.6! 00:t "average precision": | 
19 0,5: 0.61 00:! "average precision": 0.2* | 
20 0.510.600: "average precision": 0.2! 
< کا‎ 


Image Classification ?« Ox 
Deep Learning Model Reviewer =! 


Model 


model 


Model Type: MaskRCNN 
Backbone: resnet50 


Learning Rate: 
slice(1.3183e-05', '1.3183e-04', None) 


v Training and Validation Loss 


— nan 
D | — halan 


0 00 1520 E E 
Tuizope cmo 


v Analysis of the Model 


Average Precision Score: ( 
TES 
} 


v Show Results 


oua rolls rab ite 


v Show Results 


enis nhi Pr i 


تعرض أمثلة على نتائج العينات 
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Deep Learning مجموعة أداوات‎ 


4 Ba Image Analyst lools 

té Change Detection 

b & Classification and Pattern Recognition 

4 & Deep Learning 
^ Classify Objects Using Deep Learning 
A Classify Pixels Using Deep Learning 
^. Compute Accuracy For Object Detection 
“\ Detect Change Using Deep Learning 
^. Detect Objects Using Deep Learning 
” Export Training Data For Deep Learning 
E Extract Features Using Al Models 
A Non Maximum Suppression 
g Train Deep Learning Model 
& Train Using AutoDL 


-—S —‏ 
أداة Classify Object Using Deep Learning‏ : 
أخذ عينات من الظاهرات التى تحتاج الى تصنيف( Object‏ ( واعطاء اسم وقيمة لكل صنف تم اخذ عينات له 


تتطلب الاداة ادخال طبقة Raster‏ والنموذج الى سبق تدريبه ؛ ومن Enviroments‏ يتم اختيار GPR‏ 


Geoprocessing ves Geoprocessing «nx 
© Classify Objects Using Deep Learning ® © Classify Objects Using Deep Learning e 
Parameters Environments © Parameters Environments 2) 
v Output Coordinates Input Raster 
Output Coordinate System Image "IE 
- © Input Features 
Geographic Transformations clases نااك‎ 
“|S Output Classified Objects Feature Class 
Image ClassifyObjectsUsingDe i] 
¥ Processing Extent = 
* Model Definition 
Extent = 
E m- hho Class Label Field 
> X and Y Extent ClassLabel 
> Extent Coordinate System Arguments 
Name Value 
v Parallel Processing 
Parallel Processing Factor 
v Raster Analysis 
Cell Size 
Maximum of Inputs | 2 
v Processor Type 
Processor Type 
GPU M 
GPU ID 0 


131 


Classify Pixel Using Deep Learning أداة‎ 

Classify Opject Using Deep Learning و‎ Classify Pixels Using Deep Learning الفرق بين‎ 

فى Classify Opject Using Deep Learning‏ الكشف عن الكائنات ؛ لدی صنف أو أكثر من صنف واريد رسم 292 على كل 
صنف على حدى بحيث يكون هذا الصنف هو المطلوب تحديده فمثلا لدى حيوانات ( كلب وقطة ) ومطلوب تصنيف هذه 
الكائنات لرسم مربع احر حول فئة الكلب ومربع اصفر حول فئة القطة ؛ بينما عند استخدام Classify Pixels Using Deep‏ 
8 فيكون التحليل ASÍ‏ دقة حيث يتم التصنيف بناء على البكسل ( فجميع البكسل باللون الحمراء داخل فئة الكلب 
بينما البكسل ذات اللون الأصفر تنتدى الى القطة ) 


Classify Pixels Using Deep Learning Classify Opject Using Deep Learning 
Geoprocessing vox] Geoprocessing «Bx 
© Classify Pixels Using Deep Learning ® €) Classify Pixels Using Deep Learning ® 
Parameters Environments © Parameters Environments ( 

phe ue W I 
Geographic Transformations M Input Raster 
Ss Image ~| 9 
v Processing Extent Output Raster Dataset 8 
Image ClassifyPixelsUsingDee = 
Extent 1 Model Definition 
B om E RS https://www.arcgis.com/sharing/rest/content/items/2| [aw 
> X and Y Extent l Arguments 
> Extent Coordinate System | Name Value 
| x | padding 56 
v Parallel Processing ا‎ [ batch size 4 
Parallel Processing Factor l r 
test time augmentatior| | True 
| predict background True 
v Raster Analysis 
Cell Size 
Maximum of Inputs z 
Snap Raster f 
2 
v Processor Type 
Processor Type 
GPU 
GPU ID 09 
LE [@ rn 
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Compute Accuracy For Object Detection أداة‎ 


تستخدم هذه الاداة لحساب دقة نموذج التعلم العميق من خلال مقارنة الكائنات المكتشفة ( الظاهرات الق تم 
استخراجها بالنموذج بأداة (Detect Objects Using Deep Learning‏ بالبيانات الحقيقة الأساسية. 
والمخرج من هذه الأداة جدول يحتوي على معلومات تتعلق بدقة الإخراج ؛ يحتوي الجدول على مقاييس الدقة لكل فئة في 
البيانات caa ASTE‏ بالإضافة إلى صف لجميع الفئات (الدقة الإجمالية). 
يحتوي الجدول على الحقول التالية: 
:Precision‏ نسبة عدد النتائج الإيجابية الحقيقية إلى Jhal‏ عدد التنبؤات. 
Recall‏ نسبة عدد الإيجابيات الحقيقية إلى العدد الإجمالي للتنبؤات الإيجابية. 
F1 Score‏ : المتوسط المرجح للدقة والاستدعاء. تتراوح القيم من 0 إلى 1 حيث يعني 1 أعلى A35‏ 
AP— The Average Precision‏ : وهو متوسط الدقة عبر جميع قيم الاستدعاء وتتراوح بين 0 و1 
s41:True_ Positive‏ النتائج الإيجابية الحقيقية التي تم إنشاؤها بواسطة النموذج. 
:False_Positive‏ عدد النتائج الإيجابية الخاطئة التي تم إنشاؤها بواسطة النموذج. 


False_Negative‏ : عدد النتائج السلبية الخاطئة التي تم إنشاؤها بواسطة النموذج. 


Geoprocessing «Bx 


® Compute Accuracy For Object Detection @ | 
Parameters Environments Q 


x Detected Features 


Detect Objects Using Deep Learning الطبقة المخرجة من أداة‎ -1 : — Tam imi 
طبقة البيانات التى يتم المراجعة منها ( بيانات الاختبار)‎ -2 I ar 33 

Slo من‎ gat عدي لكان اللا حفط فيه الجدول‎ -3 ERE E 

Detected Class Value Field =‏ 4- تحديد المكان الذى يحفظ فيه التقرير المخرج من 813 

Ground Truth Class Value Field 0‏ 5- اختيار الحقل من الطبقة المراد مراجعتها 

Oe [— =‏ ست Meum‏ ئ اعبار الحقل من الطبقة اة 


Mask Features 


لفيم مخرجات أداة Compute Accuracy For Object Detection‏ يجب أولاً فهم نتائج نموذج الكشف عن الكائنات ؛ حيث 
أنه في اكتشاف الكائنات وتصنيفهاء يمكن للنموذج التنبؤ بفئة إيجابية أو فئة سلبيةء ويمكن أن تكون التنبؤات صحيحة أو 
خاطئة. على سبيل «SLM‏ عند اكتشاف وجود أشجار في صورة ماء قد تكون الفئة الإيجابية "شجرة"» بينما ستكون الفئة 
السلبية "لا توجد شجرة". يحدث التنبؤ الحقيقي عندما يكون التنبؤ صحيحًاء ويحدث التنبؤ الخاطئ عندما يكون التنبؤ 

cial فجن شين‎ agri الودج‎ Las cam إل موقع يجاب‎ pool Gell Magali المبورة اجام 145 المرساك‎ d 


المحيطة باللون الأزرق الداكن إلى توقع «ela‏ حيث توقع النموذج عدم وجود شجرة. 


aged‏ أن هناك توقعات مرحيحية واخرى Abels‏ ومكن Lgs I eng?‏ وذلك غان soil‏ العال: 
القيمة TN‏ 
1 إيجابي حقيقي ( تنبأ النموذج بوجود شجرة» وهذا صحيح). 
2 إيجابية كاذبة Lis)‏ النموذج بوجود شجرةء liag‏ غير صحيح.) 
3 سلبي كاذب ( توقع النموذج عدم وجود شجرة» liag‏ غير صحيح). 


4 صحيح سلي ( توقع النموذج عدم وجود شجرةء وهذا صحیح). 


تعتمددقة النموذج على جودة عينات التدريب وعددهاء والصور المدخلةء ومعلمات النموذج» والحد الأدنى المطلوب للدقة. 
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يتم استخدام نسبة التقاطع على الاتحاد (لاها)كعتبة لتحديد ما إذا كانت النتيجة المتوقعة إيجابية حقيقية أم إيجابية 


كاذبة. نسبة لاها هي مقدار التداخل بين المربع المحيط حول كائن متوقع والمربع المحيط حول البيانات المرجعية. 


0 


loU =‏ 
1 المنطقة المتقاطعة للمربع المحيط المتوقع polls‏ 
PETERS‏ 


2 المساحة الإجمالية anal‏ المحيط المتوقع والمريع 


المحيط المرجعي الأرضي مجتمعين 


يحتوي جدول دقة الإخراج وتقرير الدقة الذي تم إنشاؤه بواسطة أداة Compute Accuracy For Object Detection‏ على 
مجموعة من مقاييس الدقة التي تعتمد على حد loU‏ وأداء النموذج. ويمكن تبسيط هذه المؤشرات على النحو التالى : 
Precision‏ الدقة: الدقة هي نسبة عدد النتائج الإيجابية الحقيقية إلى إجمالي عدد التنبؤات الإيجابية. على سبيل المثال» 
إذا اكتشف النموذج 100 شجرةء وكانت 90 منها صحيحة. فستكون الدقة 90 ASUL‏ 
الدقة - (إيجابي حقيقي)/(إيجابي حقيقي + إيجابي كاذب) 

Recall‏ والاستدعاء: هو نسبة عدد العناصر الإيجابية الحقيقية إلى العدد الإجمالي للكائنات الفعلية (ذات الصلة). على 
سبيل (JUL‏ إذا اكتشف النموذج بشكل صحيح 75 شجرة في صورة ماء وكان هناك بالفعل 100 شجرة 3( الصورةء OLS‏ 
نسبة الاستدعاء تبلغ 75 بالمائة. 

الاستدعاء - (إيجابي حقيقي)/(إيجابي حقيقي + سلبي كاذب) 


F1 score‏ : هي متوسط مرجح للدقة والاستدعاء. تتراوح القيم من 0 إلى 1» حيث يعني 1 أعلى دقة. 
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x 48.1) = F1 score‏ الاستدعاء)/[(الدقة + الاستدعاء)/2] 


منحنی استدعاء الدقة : هذا مخطط للدقة (المحور ص) والاستدعاء (المحور السيني)ء ويعمل بمثابة تقييم لأداء النموذج. 


Precision x Recall curve 


—— Precision 
--- Interpolated precision 


c 
o 
2 
o 
o 
& 


متوسط ga: APAI‏ متوسطات الدقة عبر جميع قيم الاستدعاء بين 0 و1. يمكن تفسير AP‏ على أنه إيجاد المنطقة 
الواقعة أسفل منحنى استدعاء الدقة. من خلال الاستيفاء عبر جميع elo Ud!‏ يمكن تفسير AP‏ على أنها المنطقة الواقعة 
أسفل منحن الاسترجاع الدقيق. 

متوسط الدقة۸۴" : هو AP hugis‏ عبر عتبات loU‏ المتعددة. على سبيل «JUI‏ يتوافق MAP@[0.5:0.05:0.95]‏ مع AP‏ 


لقيم نسبة LOU‏ التي تتراوح من 0.5 إلى 0.95 على فترات زمنية قدرها 0.05( متوسطًا على جميع الفئات. 
أداة Detect Change Using Deep Learning‏ 


عفدم هذه الد[ لكر اج coli‏ باسسغوام العمل Geol!‏ حبك AEST ety‏ عن المفيرق Boze dilate‏ من JUS‏ 
لاكتشاف الظاهرات المطلوب الكشف عن التغيير فيها ) وذلك كما موضح بالصورة التالية : 
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Geoprocessing «nx 


Geoprocessing 
© Detect Change Using Deep Learning ® 


© Detect Change Using Deep Learning 


s Parameters Environments Q 
Parameters Environments — 


v Processing Extent From Raster 
World Hillshade ~| iani 
tent 
DN - To Raster 
Hea œ 5 2 — " 
ا‎ an Output Classified Raster 
EM Lorne ser WorldHillshade_DetectChangeU 
v Parallel Processing | * Model Definition 
: 
Parallel Processing Factor 
Arguments 
Name Value 


Raster Analysis 
Cell Size 
Maximum of Inputs 


Processor Type 


Processor Type 
GPU 


GPU ID 


Detect Object Using Deep Learning أداة‎ 

تدم هذه الآداة لأكتشاف الكاتنات من الور utl als asa‏ #مثل اسشغراع المباق أ واسشتفراج الطرق و السيارات 
وخلافه 

عبات الآداة : الصورة call‏ يكم استغراج الظاهرات مها g ipai‏ مدرب fo‏ اسمخراع الظاهرة المظلوية 

وهناك متطلبات ادخال اختيارية مثل : 

8 :عدد وحدات البكسل الموجودة على حدود مربعات الصورة التي يتم من خلالها مزج التنبؤات للمربعات المجاورة. 
Batch size‏ : عدد مربعات الصور التي تمت معالجتها في كل خطوة من خطوات استنتاج النموذج. هذا يعتمد على ذاكرة 
graphic card‏ للجہاز المستخدم . 
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Geoprocessing «nx 
©  Detect Objects Using Deep Learning e 


Parameters Environments 


Extent 


E A- gi D © 
> Xand Y Extent 
> Extent Coordinate System 


v Parallel Processing 


Parallel Processing Factor 


v Raster Analysis 


Cell Size 
Qassem Pilot.tif Y 


Mask 


Y Processor Type 


Processor Type 


GPU v 


GPU ID | 0 


Q 


^ 


Geoprocessing 


VU EX 


(€  Detect Objects Using Deep Learning e 


Parameters Environments 


@ Input Raster 
Qassem Pilot.tif 


Output Detected Objects 


Bp 


Qassem Pilot DetectObjectsUs 


Model Definition 


CAUsersVDr Rasha\Downloads\BuildingFootprintExt 


Arguments 

Name Value 
padding 100 

X | batch size 2 

threshold 0.9 
return bboxes False 
test time augmentatic | | False 
merge policy mean 
tile size 400 


[LJ] Non Maximum Suppression 


2 Detect Objects Using Deep Learning 


Running... 


View Details Open History 


» Run ~| 
056 @) 


: Export Traning Data For Deep Learning أداة‎ 


تستخدم هذه الاداة لاستخراج بيانات تدريب لاستخدامها فى تدريب النموذج فيما بعد وتتطلب هذه الاداة وجود طبقة 


تحتوى على عينات تدريبية ؛ فمثلا لو أرادنا استخراج المبانى أو الطرق يتم انشاء طبقة ورسم عينات لاستخدامها فى 


استخراج عينات التدريب ويراعى الدقة فى أخذ العينات وكذلك محاولة تعدد شكل العينات ( تعدد أشكال المبانى التق يتم 


رسمها كعينات تدريب ) ؛ فتأخذ الاداة بصمة هذه العينات وتعطى لنا بأمثلة مختلفة لها لاستخدامها فى تدريب تموذج تعلم 
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عميق. 


1- الطبقة المراد اخراج عينات تدريبية منها وتكون من نوع Raster‏ 
2- مكان استخراج البيانات Y)‏ بد أن يكون مجلد فارغ ( 

cipal 1 Lala الفليقة العم‎ -3 

ف العقل الكراد ial‏ البيانات العدريية عق talal‏ 
لاتيم Ee Fede‏ 
E‏ نجهم ميات القدريب الثراة keban‏ 

7- نسبة التداخل فى الصور المستخرجة ) عينات التدريب) 

Ae aal للبيانات‎ cao القطاء‎ -B 

E id البياقاف ( الودج المخد‎ uas -9 


تحديد التنسيق الذي سيتم استخدامه لتسميات بيانات تعريف الإخراج 


Geoprocessing 
© Export Training Data For Deep Learning 


Parameters Environments 


nput Raster 


Image 


Additional Input Raster 


* Output Folder 


nput Feature Class Or Classified Raster Or Table 


Class Value Field 


Buffer Radius 
nput Mask Polygons 


mage Format 
TIFF format 


Tile Size X 


Tile Size Y 


Stride X 


Stride Y 


Rotation Angle 


Reference System 


| Map space 


[C] Output No Feature Tiles 
Metadata Format 


KITT] Labels 

PASCAL Visual Object Classes 
Classified Tiles 

RCNN Masks 

Labeled Tiles 

Multi-labeled Tiles 

Export Tiles 

CycleGAN 

Imagenet 


0 Panoptic Segmentation 


إذا كانت بيانات عينة التدريب المدخلة عبارة عن feature class‏ مثل طبقة مبانى أو ملف نموذج تدريب standard‏ 


«classification‏ فاستخدم خيار KITTI Labels‏ أو PASCAL Visual Object Classes‏ . يتطابق اسم ملف البيانات التعريفية 


مع اسم الصورة المدخلة . واذا كانت بيانات نموذج التدريب عبارة عن «class map‏ فيتم استخدام Classified Tiles‏ 
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ably Ae gach (KITT)‏ تقييخ SLI! SLATS‏ مجموعة بياقات KITT‏ عيارة عن محفوغة معابير Aug lt‏ ملفات السمية 


ع الكائنات. 


بالنسبة لتنسيق بيانات تعريف KITT‏ يتم إنشاء 15 عمودًاء ولكن يتم استخدام 5 منها فقط في الأداة. العمود الأول هو 
قيمة الفئة. يتم تخطي الأعمدة الثلاثة التالية. تحدد الأعمدة من 5 إلى 8 الحد الأدنى للمستطيل المحيطء والذي يتكون من 
أربعة مواقم | جدافيات الصورةموعدات الكل الببيق والعلونة والبمى والبيفاية يشما الع (aS‏ لمال dnd‏ 
شريحة التدريب المستخدمة في مصنف التعلم العميق. لا يتم استخدام الأعمدة 

المتبقية. 

PASCAL Visual Object Classes:‏ : ستتبع البيانات التعريفية نفس تنسيق مجموعة بيانات تحليل الأنماط والنمذجة 
الإحصائية والتعلم الحسابي وهى عبارة عن مجموعة بيانات صور موحدة للتعرف على Object Classes‏ ويستخدم هذا 
التنسيق للكشف عن الكائنات. 


Classified Tiles‏ : سيكون الإخراج عبارة عن شريحة صورة مصنفة واحدة لكل شريحة صورة مُدخلة. لا يتم استخدام أي 


RCNN Masks‏ :سيكون الإخراج عبارة عن شرائح من الصور تحتوي على قناع في المناطق التي توجد بها العينة. يقوم النموذج 
بإنشاء مربعات محيطة وأقنعة تجزئة لكل Jute‏ للظاهرة في الصورة. يعتمد هذا التنسيق على شبكة (FPN)‏ و ResNet101)‏ 


) في نموذج إطار عمل التعلم العميق. يستخدم هذا الت 


الكائنات عند استخدام نموذح Siam Mask‏ أثناء التدرببء. بالإضافة إلى تصنيف وحدات ال للسلسلة الزمنية عند 


استخدام بنية PSETAE.‏ 


Labeled Tiles‏ : سيتم تسمية كل مربع مخرج بفئة معينة. يستخدم هذا التذ 
:Multi-labeled Tiles‏ سيتم تسمية كل مربع مخرجات بفئة واحدة أو أكثر. يستخدم هذا التذ 
Export Tiles‏ : سيكون الإخراج عبارة عن شرائح صور بدون ملصق. يُستخدم هذا التذ 


Supersolution.9 Pix2Pix 


CycleGAN‏ : سيكون الناتج عبارة عن شرائح صور بدون ملصق. يُستخدم هذا التذ 
التي تستخدم لتدريب الصور غير المتداخلة. 
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:Panoptic Segmentation‏ سيكون الناتج عبارة عن شريحة صورة مصنفة واحدة ومثيل واحد لكل شريحة صورة مُدخلة. 


سيحتوي الإخراج Gaul‏ على شرائح صور تخفي المناطق التي توجد بها العينة؛ سيتم تخزين شرائح الصور هذه في مجلد 


Extract Features Using Al Models أداة‎ 


تستخدم لتشغيل نموذج تعلم عميق مدرب من قبل أو أكثر على البيانات من نوع Raster‏ المدخلة لاستخراج Features‏ 
وأتمتة المعالجة اللإحقة للمخرجات المستنتجة. 


Geoprocessing Vee 
© Extract Features Using Al Models e 
Parameters Environments (2 
* Input Raster 
| | 
Area of Interest 
" | Gm f~ 
Mode 
Infer and Postprocess M | 
* Output Location 


* Output Prefix 


v Models 
Pretrained Models (2 
ARCTIC SEAL DETECTION 


Additional Models 
Model Path Postprocessing Workflow 


|æ [ 


v Inferencing Options 
Confidence Threshold 


|.) Save Intermediate Output 


| ] Test Time Augmentation 
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Lele الطبقة المطلوب العمل‎ Input Raster -1 

Area of Interest. -2‏ :النطاق الجغرافي الذي سيتم استخدامه لاستخراج المعالم. حيث يتم استخراج الميزات 
الموجودة في منطقة الاهتمام فقط 

Mode -3‏ : يحدد الوضع الذي سيتم استخدامه لمعالجة البيانات النقطية المدخلة 


f» Mode 
Infer and Postprocess 


* | Infer and Postprocess 


Only Postprocess 


- الاستدلال والمعالجة اللاحقة : سيتم استخراج الميزات من الصور ومعالجتها ÉY‏ هذا هو الافتراضي. 
-المعالجة اللاحقة فقط :ستتم معالجة البيانات النقطية المدخلة مباشرةً بعد المعالجة. من المتوقع وجود بيانات 
نقطية ذات نطاق واحد مع تصنيف ALS‏ لهذا الخيار. 

Out put Location -4‏ تحديد موقع البيانات المستخرجة. 

:Out put Prefix -5‏ ستتم إضافتها إلى اسم المخرجات التي سيتم حفظها في موقع الإخراج. أو كاسم لطبقة المجموعة 
التي سيتم استخدامها لعرض جميع المخرجات. 

:Models -6‏ نماذج ArcGIS‏ المدربة مسبقًا من ArcGIS Living Atlas of the World‏ والتي يمكن استخدامها في 


البيانات النقطية المدخلة المتوفرة. تتطلب اتصالاً بالإنترنت لتنزيل النماذج المدربة مسبقًا. 


v Models 
109 Pretrained Models © 
x [-] 
Addi BUILDING FOOTPRINT EXTRACTION - AFRICA “ 
Mod BUILDING FOOTPRINT EXTRACTION - AUSTRALIA 
BUILDING FOOTPRINT EXTRACTION - CHINA 
v Infeı BUILDING FOOTPRINT EXTRACTION - USA 
Conf CAR DETECTION - USA 
[s CLOUD MASK GENERATION (SENTINEL-2) 
[^ 1 ELEPHANT DETECTION 
HIGH RESOLUTION LAND COVER CLASSIFICATION - USA 
HUMAN SETTLEMENTS CLASSIFICATION (LANDSAT 8) 
HUMAN SETTLEMENTS CLASSIFICATION (SENTINEL-2) 
LAND COVER CLASSIFICATION (AERIAL IMAGERY) 
LAND COVER CLASSIFICATION (LANDSAT 8) v 
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7- ولاك E‏ تقوم claras‏ ت المظلوية alas 194a Go‏ مادج CN‏ الاميطناض gal‏ مسقا (Sing‏ 
أن تكون نماذج الذكاء الاصطناعي إما نماذج ArcGIS‏ مُدربة مسبقًا من ArcGIS Living Atlas of the World‏ أو حزم 
cls‏ تكلم jes‏ تم (dipk) Laglail‏ تعمل الأدأةمم الصو وتيف بالاففياز ن ين العديه من cSlaill‏ سوا 

cà sts‏ الكاعنات of‏ تسبتيف aS‏ المدرئة مسيقا والي Sg‏ استخراج الظاهرات (cold)‏ من الصو تقوم 
الآداة يشعل Aa Jal el gles!‏ الله عل A‏ جات Aue gis eL‏ فن الکن AzJlall ele! Gad‏ 
اللاحقة للنتائج التي تم إنشاؤها مسبقًا فقط باستخدام هذه الأداة. تقوم 8153 بإنشاء group layer‏ تحتوي على 


als‏ الميزات المستخرجة. 


١ KF 


Raw building footprints Postprocessed building footprints 


اى أن الأداة تقوم تلقائيًا بتنفيذ خطوات ما بعد المعالجة لنماذج ArcGIS‏ المدربة مسبقًا. يمكن أيضًا استخدام مسارات عمل 
ما بعد المعالجة هذه مع النماذج المتوافقة الأخرى التي تم تدريما باستخدام ArcGIS.‏ يتيح ذلك إنشاء نتائج منقحة دون 
تشغيل أدوات معالجة جغرافية متعددة. 

تتوفر عمليات سير عمل ما بعد المعالجة لتنظيم Lines‏ و «Parcel‏ بالإضافة إلى تنظيم المضلعات. يعمل تنظيم Parcels, Lines‏ 
مع البيانات النقطية أحادية النطاق ذات التصنيف GL!‏ ويعمل تنظيم المضلع فقط مع features‏ من نوع المضلع. ويجب 
أخذ هذه الجوانب في الاعتبار أثناء تطبيق المعالجة اللاحقة على نماذج إضافية. تتطلب الأداة تراخيص ملحقة )3 D Analyst,‏ 
Spatial Analyst, and Production Mapping‏ ( لتشغيل سير عمل المعالجة اللاحقة. إذا لم يكن أي من هذه الملحقات AE Us‏ 
فسيتم تخطي خطوات المعالجة اللاحقة وسيتم إنشاء المخرجات الأولية فقط بواسطة الأداة. 
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F Additional Models 
Model Path Postprocessing Workflow 


x 5 


Line Regularization 


v Inferencing Options 
Confidence Threshold 
|] Save Intermediate Output 


Parcel Regularization 
Polygon Regularization 


None 


| ] Test Time Augmentation 


۰ . - £ 
: Non Maximum Suppression أداة‎ 


يحدد الميزات المكررة من مخرجات أداة Detect Objects Using Deep Learning‏ كخطوة ما بعد المعالجة وانشاء مخرجات 
جديدة بدون ميزات مكررة. يمكن لأداة Detect Objects Using Deep Learning‏ إرجاع أكثر من مردع محيط أو مضلع لنفس 
الكائق: خاصة كتأئير جاتي للتجاتب: إذا cal las‏ معلمتان مم Acad‏ قصوقى معينة: فستثم إزالة الميزة ذات قيمة الثقة الأقل. 


Geoprocessing «nx 
© Non Maximum Suppression e 
Parameters Environments 2 
الطبقة المراد تدقية‎ * Input Feature Class 6 
الحقل الموجود 3( فئة المعالم الذى يحتوي على درجات الثقة‎ * Confidence Score Field 
١ ١ Ll 
. الحقل الذى يحتوى على القيمة‎ Class Value Field 

¥ احتيار مكان حفظ البيانات المخرجة . 

* Output Feature Class 
الحد الأقصى للتداخل.‎ = 
Max Overlap Ratio 0 
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يجب أن تحتوي feature class‏ على حقل ثقة بقيمة ثقة لكل معلم. و إذا كانت feature class‏ تحتوي على أكثر من فئة ظاهرة 
مثل الأشجار أو السيارات أو المباني - فيجب أن تحتوي أيضًا على حقل class value‏ أو class name‏ . و إذا كان هناك معلمان 
متداخلان لديهما نسبة تداخل أكبر من الحد الأقصى لنسبة التداخل المحددةء فستتم إزالة المعلم ذو الثقة الأقل. 
تقوم الأداة أولاً بمراجعة فئة المعالم لكل Aid‏ كائن على حدةء وتضع علامة على الميزات المكررة ذات الثقة الأقل المراد إزالتها. ثم 
يقوم بمراجعة arom‏ الميزات» ومقارنة ميزات فئات الكائنات المختلفة و الإخراج عبارة عن feature class‏ جديدة مع إزالة 
الميزات المكررة المكتشفة. 

: Train Deep Learning Model أداة‎ 


تستخدم الاداة بيانات التدريب لتدريب نموذج تعلم عميق علا ؛ حيث يتم ادخالها فى طبقة الادخال ؛ 


Geoprocessing «nx 
(9 Train Deep Learning Model ® 


Parameters Environments 3) 


O Input Training Data 0 
x | 
* Output Folder 


Max Epochs 
Pre-trained Model 


Model Type 


Model Arguments 
Name _ Value 


v Data Preparation 
Data Augmentation 


Batch Size | 64 


Validation % | 10 


v Advanced 


Learning Rate | 


Backbone Model 


Monitor Metric 
Validation loss 


V) Stop when model stops improving 
v| Freeze Model 


>) Run ~v 
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Geoprocessing «nx 
2 Train Deep Learning Model 1 
Parameters Environments 2) 


* Input Training Data 


* Output Folder 


Max Epochs 20 
Pre-trained Model 


© Model Type 


Single Shot Detector (Object detection) = 
U-Net (Pixel classification) 
Feature classifier (Object classification) 
¥ Pyramid Scene Parsing Network (Pixel classification) 
RetinaNet (Object detection) 
MaskRCNN (Object detection) 
YOLOv3 (Object detection) 
DeepLabV3 (Pixel classification) 
FasterRCNN (Object detection) 
BDCN Edge Detector (Pixel classification) 
HED Edge Detector (Pixel classification) 
Multi Task Road Extractor (Pixel classification) 


يحدد نوع النموذج الذي سيتم استخدامه لتدريب نموذج التعلم العميق وتتعدد النماذج المتوفرة داخل الأداة على 
النحوالتالى: 

:Single Shot Detector (Object detection)‏ يستخدم 552 للكشف عن الكائنات. تستخد م بيانات التدريب المدخلة لهذا 
النوع من النماذج تنسيق Pascal Visual Object Classes metadata‏ البيانات التعريفية لفئات الكائنات المرئية من Pascal.‏ 
U-Net (Pixel classification)‏ : يتم استخدام بنية U-Net‏ لتدريب النموذج. يتم استخدام U-Net‏ لتصنيف البكسل. 
Feature classifier (Object classification)‏ : يتم استخدام بنية مصنف الميزات لتدريب النموذج. يستخدم النموذج 
لتصثيف الكافنات أو الضوز. 

(PSPNET) يتم استخدام بنية شبكة تحليل المشهد الہرمي‎ : Pyramid Scene Parsing Network (Pixel classification) 
dell castas aa letus ty S all ay 

RetinaNet (Object detection)‏ : يتم استخدام بنية RetinaNet‏ لتدريب النموذج. يتم استخدام RetinaNet‏ للكشف عن 
الكائنات. 

MaskRCNN (Object detection)‏ : يستخدم MaskRCNN‏ للكشف عن الكائنات. يتم استخدام هذا الأسلوب عن طريق 
cibis ayas‏ المظلوب استخراجبا فيتم التحديد الدقيق SLASH‏ الصورة: يمكن استخدام هذا التوع من التماذج 
للكشف عن المبانى. ويستخدم تنسيق البيانات التعريفية MaskRCNN‏ لبيانات التدريب كمدخلات. يجب أن تبدأ قيم الفئة 
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Gol CUDA classy] Ala Bing القوع من الاح الا دام‎ la casas كن‎ 31 aie الخال‎ Gay abled 
GPU pou 

YOLOv3 (Object detection)‏ : يتم استخدام ۷۲010۷3 للكشف عن الكائنات. 

DeepLabV3 (Pixel classification)‏ : يستخدم DeepLab‏ لتصنيف البكسل. 

FasterRCNN (Object detection)‏ : يتم استخدام FasterRCNN‏ للكشف عن الكائنات. 

BDCN Edge Detector (Pixel classification)‏ : يتم استخدام كاشف الحافة BDCN‏ لتصنيف البكسل. يعد هذا الأسلوب 
de‏ لتحسين اكتشاف الحواف للكافتات قايس Alia‏ 

ALAISI لتصنيف البكسل. يعد هذا الأسلوب مفيدًا في‎ (HED) يستخدم‎ : HED Edge Detector (Pixel classification) 
حدود الحافة والكائن.‎ 

Multi Task Road Extractor (Pixel classification)‏ يتم استخدامه لتصنيف البكسل. وهذا النيج مفيد لاستخراج 
شبكة الطرق من صور الأقمار الصناعية. 

:ConnectNet (Pixel classification)‏ يتم استخدام ConnectNet‏ لتصنيف البكسل. وهذا النموذج Lass]‏ مفيد لاستخراج 
شبكة الطرق من صور الأقمار الصناعية. 

Pix2Pix (Image translation)‏ : تستخدم Pix2Pix‏ للترجمة من صورة إلى صورة. يقوم هذا الأسلوب بإنشاء كائن نموذجي 
يقوم بإنشاء صور من نوع إلى آخر. 

degi للترجمة من صورة إلى صورةيعد هذا الأسلوب فريدًا من‎ CycleGAN يستخدم‎ : CycleGAN (Image translation) 
Gems qr laid الت من‎ Lu ASM ادرت‎ bly etia olas إل‎ clad Gad سه‎ Bll أن الور‎ du 
CycleGAN. البيانات التعريفية‎ 

Super-resolution (Image translation)‏ : الدقة الفائقة للترجمة من صورة إلى صورة. يقوم هذا الأسلوب بإنشاء كائن 
نموذجي يزيد من الدقة ويحسن جودة الصور. 

Object يستخدم هذا النموذج لتصنيف البكسل. يقوم هذا الأسلوب بإنشاء‎ : Change detector (Pixel classification) 
نموذجي يستخدم صورتين مكانيتين وزمانيتين لإنشاء بيانات نقطية ( طبقة جديدة ) مصنفة للتغييرات بين الصورتيين.‎ 
يستخدم هذا النموذج لترجمة الصورة إلى نص. حيث يقوم بإنشاء نموذج يقوم‎ : Image captioner (Image translation) 
بإنشاء تسميات توضيحية نصية لصورة ما.‎ 

Siam Mask (Object tracker)‏ : يستخدم Siam Mask‏ للكشف عن الأشياء في مقاطع الفيديو. يتم تدريب النموذج 


باستخدام إطارات الفيديو ويكتشف الفئات والمربعات المحيطة بالكائنات في كل إطار. 
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MMSegmentation (Pixel classification)‏ : يستخدم النموذج لتصنيف البكسل. 

Deep Sort (Object tracker)‏ : يستخدم الفرز العميق لاكتشاف الكائنات في مقاطع الفيديو. يتم تدريب النموذج 
alata‏ إظارات القيديو كتف الففات cotta ala sas clas Lio‏ كل إطان هدم ata‏ تدر oll‏ لذا 
النوع من النماذج تنسيق بيانات تعريف dlmagenet.‏ حين أن Siam Mask‏ مفيد لتتبع كائن ماء و Deep Sort‏ مفيد في تدريب 
النموذج على تتبع كائنات متعددة. 

Pix2PixHD (Image translation)‏ : ستم استخدام بنية Pix2PixHD‏ لتدريب النموذج. يستخدم Pix2PixHD‏ للترجمة من 
صورة إلى صورة. 

MaX-DeepLab (Panoptic segmentation)‏ :يستخدم MaX-DeepLab‏ للتجزئة الشاملة. يقوم هذا الأسلوب بإنشاء كائن 
نموذجي يقوم بإنشاء الصور والميزات. 

DETReg (Object detection)‏ : يتم استخدام DETReg‏ للكشف عن الكائنات. تستخدم بيانات التدريب المدخلة لهذا النوع 
من النماذج فئات Pascal Visual Object.‏ هذا النوع من النماذج يستخدم وحدة معالجة الرسومات بشكل مكثف؛ فهو 
يتطلب وحدة معالجة رسومات مخصصة بذاكرة لا تقل عن 16 جيجابايت لتعمل بشكل صحيح. 


PSETAE (Pixel classification)‏ :سيتم استخدامه لتدريب النموذج على تصنيف السلاسل الزمنية. 


: Train Using AutoDL أداة‎ 


تستخدم هذه الأداة لتدريب نموذج تعلم عميق من خلال بناء مسارات تدريب وأتمتة جزء كبير من عملية التدريب. يتضمن 
ذلك زيادة البيانات واختيار النموذج و تتضمن مخرجاتها مقاييس أداء أفضل نموذج في بيانات التدريبء بالإضافة إلى حزمة 
نموذج التعلم العميق المدرب ملف . dlpk)‏ ) التي يمكن استخدامه . 

يبدأ سير عمل مشروع التعلم العميق النموذجي ( (DL)‏ بتحديد مشكلة العمل وطرح سؤال UKAM‏ . ويتبع ذلك سلسلة من 
الخطوات» ss‏ في ذلك إعداد البيانات gi)‏ المعالجة المسبقة)ء والتدريب على النماذج» وضبط الظاهرات الفائقةء وتقييم 


النموذج. هذه عملية تكرارية وغالبًا ما يتم الوصول إلى النموذج الأمثل بعد تكرارات وتجارب متعددة. 
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Data -— Model training 
/ 


Problem Data Hyperparameter ue 
ل‎ Model r, 


evaluation 


يستغرق تحديد النموذج الذي يناسب البيانات بشكل أفضل الكثير من الوقت والجهد والخبرة فتعمل أداة التدريب 
باستخدام AutoDL‏ على أتمتة سير العمل بأكمله وتحديد أفضل الشبكات العصبية مع أفضل مجموعة من المعلمات 
الفائقة التي تناسب البيانات. 
نطاق العمل بالأداة: 
زيادة البيانات: تتطلب مشاريع التعلم عن بعد الناجحة كميات هائلة من بيانات الإدخال عالية الجودة لمعالجة مشكلة معينة. 
ومع ذلك» من الصعب في الواقع الحصول على بيانات مصنفة بكميات كبيرة. فيتم تطبيق تقنيات زيادة البيانات من أجل زيادة 
كمية البيانات بحيث تشبه بيانات العالم الحقيقي. يمكن أن تتضمن 8365 البيانات تحويلات هندسيةء والاقتصاص» 
والترجمة» وازالة الضوضاء وما إلى ذلك. وكل ذلك قد يتطلب كثيراً من الوقت والجهد وتعتبر هذه الخطوة من الخطوات المملة 
وقد تتطلب معرفة وخبرة تفصيلية خاصة بالمجال. 
الخصم التلقائي من batch size‏ : تصدير بيانات التدريب باستخدام أداة التعلم العميق عبارة عن مجلد يحتوي على مجموعة 
بيانات. تحتوي هذه البيانات على كمية كبيرة من الصورء (alls‏ يجب إرسالها على دفعات بناءً على الموارد المتاحة. تقوم الأداة 
بأتمتة عملية حساب حجم الدفعة الأمثل لتدريب نموذج التعلم العميق flu‏ على الموارد المتاحة. 
العدريب النموةي asly‏ التموذع J:‏ خطوة التدريب على التموذج: jd)‏ ممارس التعلم عن يعن شيكة التعلم عن تحد 
المناسبة بناءً على المشكلة وخصائص البيانات. ثم يبدأون العملية التكرارية لنماذج التدريب لتتناسب مع البيانات» والتي غالبًا 
تتضمن تجربة العديد من شبكات DL‏ العصبية المختلفة. قد تحتوي US‏ من هذه الخوارزميات على العديد من المعلمات 
الفائقة المختلفة ٠ hyperparameters‏ وهي قيم يتم تحديدها Gots‏ بواسطة ممارس التعلم العميق والتي تتحكم في كيفية 
تعلم النموذج. يتم بعد ذلك ضبط هذه المعلمات الفائقة وتعديلها محاولة لتحسين أداء الخوارزمية وتحقيق نتائج أفضل. هذه 
عملية المتكررة تتطلب الوقت والخبرة وتضمن نماذج الشبكات العصبية المختلفة نماذج الكشف عن الكائنات مثل 
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dis و نماذج تصنيف البكسل‎ MMDetection. و‎ FasterRCNNs YoloV39 RetinaNets SingleShotDetector 
يعمل بشكل أفضل على بيانات معينة. من‎ Lage وكلا‎ MMSegmentation و‎ DeepLab و‎ PSPNetClassifier g UnetClassifier 
الصعب التنبؤ بالنماذج التي ستعمل بشكل جيد على مجموعة بيانات معينةء لذلك يجب عليك تجربة جميع النماذج لمقارنة‎ 
أدائها قبل اتخاذ قرار بشأن النموذج الذي يناسب البيانات بشكل أفضل.‎ 

ضبط المعلمات Hyperparameteraaslall‏ : على الرغم من أن معظم الخطوات السابقة كانت متكررة» إلا أن الخطوة التي 
غالبًا ما تكون الأكثر صعوبة أثناء تدريب نماذج التعلم الآلي هي ضبط المعلمات الفائقة. يمكن اعتبارها بمثابة أدوات 
مساعدة تأتي مع كل نموذج. 

تقييم النموذج: الخطوة الأخيرة في سير عمل DL‏ هي تقييم النموذج» حيث تتحقق من أن شبكات DL‏ العصبية المدربة 
والمضبوطة سوف تعمم بشكل جيد على البيانات التي لم يتم تركيها GILE Lele‏ ما يُشار إلى هذه البيانات غير المرئية باسم 
مجموعة التحقق أو الاختبار ويتم الاحتفاظ بها منفصلة عن بقية البيانات المستخدمة لتدريب النموذج. المدف من هذه 


الخطوة النهائية هو التأكد من أن شبكات DL‏ تنتج دقة تنبؤية مقبولة للبيانات الجديدة. 
في سير عمل DL‏ هناك درجات متفاوتة من المدخلات البشريةء وصنع القرارء والاختيار الذي يحدث في كل خطوة. 
هناك ن التساؤلات | الآ 


هل تم جمع البيانات المناسبة لمعالجة AULAN‏ وهل هناك ما يكفي منها؟ 

إذا تم العثور على بيانات ذات تسمية خاطئةء فما الذي يجب أن يحل محلها؟ 

كم عدد العصور التي يجب تدريب نموذج DL‏ عليها؟ 

ما هي الشبكة العصبية DL‏ التي يجب استخدامها؟ 

ما هو مستوى الأداء المقبول للنموذج؟ 

ماهو أفضل مزيج من المعلمات الفائقة لنموذج معين؟ 

من المحتمل أن يتضمن هذا القرار الأخير مئات أو حتى آلاف المجموعات من المعلمات الفائقة التي يمكن تكرارها. إذا Lind‏ 
بتدريب العديد من شبكات DL‏ وضبطهاء فستصبح العملية برمتها غير ALLE‏ للإدارة وغير منتجة. بالإضافة إلى ذلك, تتطلب 
العديد من الخطوات في سير عمل DL‏ فهمًا فنيًا متخصصًا لتقنيات ele‏ البيانات والإحصائيات وخوارزميات التعلم العميق. 
على هذا النحوء قد يستغرق تصميم مشاريع التعلم عن بعد وتشغيلها Mgb s‏ ويتطلب عمالة كثيفة» ومكلمًاء وغالبًا ما 
يعتمد بشكل كبير على gules‏ التعلم عن بعد المدربين وعلماء البيانات. 

وفي العقد الماضيء شهد التعلم العميق نموًا سريعًا في كل من نطاق التطبيقات التي يتم تطبيقه Lele‏ وكمية الأبحاث الجديدة 


المنتجة ple‏ بعض أكبر القوى الدافعة وراء هذا النمو هي نضج خوارزميات وأساليب DL‏ نفسهاء وتوليد ونشر كميات هائلة 
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من البيانات لتتعلم منها الخوارزميات» ووفرة الحوسبة غير المكلفة لتشغيل الخوارزميات» وزيادة الوعي من بين الشركات أن 
خوارزميات DL‏ يمكنها معالجة هياكل البيانات والمشكلات المعقدة. 

ترغب العديد من المؤسسات في استخدام التعلم العميق للاستفادة من بياناتها واستخلاص رؤى جديدة قابلة للتنفيذ منهاء 
ولكن هناك خلل بين عدد تطبيقات التعلم العميق المحتملة وعدد ممارسيه والخبراء للتعامل معها. ونتيجة لذلك» هناك طلب 
متزايد على إضفاء الطابع الديمقراطي على التعلم العميق عبر المؤسسات من خلال إنشاء أدوات تجعل الامر Elin‏ على نطاق 


ففي الآونة الأخيرةء ظهر التعلم الآلي العميق (AutoDL)‏ كوسيلة لتلبية الطلب الهائل على التعلم العميق داخل المؤسسات 
بحيث هيدف AutoDL‏ إلى إنشاء نظام واحد لأتمتة (بمعنى آخرء إزالة المدخلات البشرية من أكبر قدر ممكن من سير عمل (DL‏ 
؛بما في ذلك إعداد البيانات» وزيادة البيانات» واختيار النموذج» وضبط المعلمة الفائقةء وتقييم النموذج. ومن خلال القيام 
بذلك» يمكن أن يكون مفيدًا لغير الخبراء » و Lari‏ لممارسي التعلم العميق المدربين عن طريق التخلص من بعض الخطوات 
الأكثر ملل واستهلاكًا للوقت في سير عمل التعلم عن بعد. 

متطلبات الأداة: ادخال البيانات التدريبية واختيار نوع النموذج المطلوب سواء مبتدىء أو متقدم كما موضح أدناه . 


Geoprocessing "Bx 
2 Train Using AutoDL 
Parameters Environments Q 


] * Input Training Data 


| æ 
Pretrained Model 
| | œ 
* Output Model 
j| ad 
Total Time Limit (Hours) 2 
AutoDL Mode 
Basic Y | 


¥ Advanced Options 
Neural Networks. 3 
x | 


Save Evaluated Models 


GeoAl Tools مجموعة أدوات‎ 


: Feature and Tabular Analysis 


a GeoAl Tools 
4 & Feature and Tabular Analysis 
Ef Predict Using AutoML 
ËÎ Train Using AutoML 
Éx Imagery Al 
& Text Analysis 


&s Time Series AI 


: Predict Using AutoML أداة‎ 


يتنبأ بالمتغيرات المستمرة (الانحدار) أو المتغيرات الفئوية (التصنيف) على مجموعات البيانات المتوافقة غير المرئية 
باستخدام نموذج dlpk.‏ المدرب الذي تم إنتاجه بواسطة أداة. Train Using AUtoML‏ 


فى البداية لا بد من معرفة كيف يعمل S Auto ML‏ 
يبدأ سير عمل التعلم JYI‏ (1/ا)بتحديد مشكلة العمل وصياغة السؤال alia‏ مثل التعلم العميق وبتبع ذلك سلسلة من 
الخطوات هى نفسها أيضا والتى تم ذكرها سايق ( بما في ذلك إعداد البيانات وهندسة الميزات» واختيار الخوارزمية المناسبة 


والتدريب على النماذج» وضبط المعلمات الفائقةء وتقييم النموذج) هذه عملية تكرارية وغالبًا ما يتم الوصول إلى النموذج 


الأمثل بعد تكرارات وتجارب متعددة. 
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AutoML Workflow 


ee Naive Bayes 
eo 


Support Vector 
Machine 


£62 


Random Forest 


^ 
es 


Light GBM 


ego 
- 


ege 
Cat Boost (=) ^a 
ese 


XG Boost 


Decision Tree 
Ə, ^. 
Se 


تقوم HEY‏ التدريب باستخدام AutoML‏ بأتمتة ما يلي: 


1- المعالجة المسبقة للبيانات : تتطلب مشاريع تعلم الآلة الناجحة مجموعة من بيانات الإدخال عالية الجودة التي 
تعالج مشكلة معينة .قد تأتي هذه البيانات من مصادر بيانات مختلفة وقد تحتاج إلى دمجها .بمجرد جمع البيانات 
وتوليفهاء يجب تنظيفها وإزالة التشويش منها لضمان إمكانية تدريب خوارزميات التعلم الآلي Lele‏ بشكل فعال 
والتعلم منها dole.‏ ما تستغرق هذه الخطوة وقنًا طويلاً i‏ وقد تتطلب معرفة وخبرة تفصيلية خاصة بالمجال .يمكن أن 
يتضمن تنظيف البيانات تحديد القيم المفقودة والتعامل معهاء والكشف عن القيم المتطرفةء وتصحيح البيانات 
ذات التسمية الخاطئةء وما إلى ذلك» وكل ذلك قد يتطلب قدرًا Bus‏ من الوقت والجهد من المتخصص و فيما يلي 
خطوات المعالجة المسبقة: 


e‏ إزالة القيم المتطرفة : القيم المتطرفة هي نقاط بيانات تختلف عن بقية blä‏ البيانات . من أسباب وجود هذه 
القيم المتطرفة أخطاء إدخال البيانات» أو أخطاء قياس البيانات» أو الاختلاف فى المشروع .بغض النظر عن 
السبب» من المهم إزالة القيم المتطرفة من البيانات, لأنها تؤدى إلى إرباك النموذج أثناء مرحلة التدريب .تتمثل 
الطرق الشائعة لمعالجة القيم المتطرفة في تصحيح الإدخالات يدوبًا أو حذف الإدخالات من مجموعة البيانات. 

© احتساب القيم المفقودة: قد تحتوي بعض الأعمدة في مجموعة البيانات على إدخالات مفقودة .لا يمكن تدريب 
نماذج التعلم الآلي إذا كانت هناك إدخالات مفقودة في بيانات التدريب .للتأكد من عدم وجود إدخالات مفقودة 
في مجموعة البيانات» املأ الإدخالات المفقودة ببيانات صالحة .تتضمن استراتيجيات ملء هذه الإدخالات 
المفقودة إضافة التكرار الأكثر شيوعًا للقيمة أو إضافة قيمة جديدة لتسليط sgall‏ على أن البيانات 
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متقودة ببالفينية للبيانات Avedyll‏ وهتاك idl! cam)‏ جات ف امخام gf agii‏ "الوسيظ scared‏ 
الإدخالات في عمود البيانات المفقود.ة؛ يمكن تحديد ذلك عن طريق تشغيل أداة . Fill Missing Values‏ تتيح 
الأداة إمكانية احتساب ليس فقط باستخدام إحصائية من العمود. ولكن Gash‏ باستخدام الاستراتيجيات 
zal‏ مكل abend‏ المعليين وتجيران الزماق costs‏ أو الاسر اجات الرمنية كل قيم السالاسل الومنية. 

ols e‏ البيامات ae iL andar‏ الافتراضيات الأباسية eli‏ تدر شود ga OLS (Ja Jl lanl Jas‏ أن 
البيانات التي يتم تدريما يتم توزيعها بشكل طبيعي؛ أي أنه يتبع منحنى . bell‏ 


قبل استخدام النموذج الخطيء لا بد من التأكد من توزيع كل عمود في مجموعة البيانات بشكل طبيعي .إذا لم يتم توزيع أي 
أعمدة بشكل طبيعيء فسيتم تطبيق التحويلات Kig‏ شائع على البيانات لتحويلها إلى توزيع عادي. 


P إل ان الكوارزبيات اللىل‎ cad لاني‎ pully اغلاه 1 بكرن مخ‎ ang Le من أن‎ ll cde 
LightGBM »XGBoost Random Forest 9Extra Tree و‎ Decision Tree Jis - اللوجستي والنماذج المستندة إلى الشجرة‎ 
لاتفترض أي حالة طبيعية وتكون أكثر 858 في التعامل مع النماذج الخطية. الاختلافات في الحجم والتوزيعات المنحرفة‎ - 
وما إلى ذلك.‎ 


O‏ تحويل البيانات الفئوية إلى رقمية - تتطلب معظم نماذج التعلم JYI‏ أن تكون البيانات المستخدمة للتدريب في 
شكل أرقام.لا يمكنهم العمل مع أنواع البيانات الأخرى.قم بتحويل الأعمدة غير الرقمية 
مثل الولاية أو البلد أو المدينة أو فئة الغطاء الأرضي ونوع البناء والحزب السيامي المسيطر وما إلى ذلك» إلى 
أرقام .تتضمن التقنيات المستخدمة لتحويل البيانات الفئوية إلى أرقام تشفير الملصقات والتشفير السردع. 


Feature engineering -2‏ تسمى الأعمدة المستخدمة أثناء عملية تدريب النموذج الميزات .تختلف فائدة هذه الميزات أثناء 
olai‏ النموذج .قد لا تكون بعض الميزات مفيدةء وقي هذه الحالات» يتحسن النموذج عند إزالة الميزات من مجموعة البيانات. 
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هناك بعض الأساليب recursive feature elimination Jis‏ وتقنيات random feature‏ في تحديد مدى فائدة الميزات 
الموجودة في مجموعة البيانات» وتتم إزالة الميزات غير المفيدة في مثل هذه الأساليب بشكل ale‏ في بعض الحالات» يؤدي دمج 
ميزات متعددة في ميزة واحدة إلى تحسين النموذج .وتسمى هذه العملية هندسة الميزات. 


ويصرف النظر عن الميزات الجديدة التي تم الحصول Lele‏ من خلال الجمع بين ميزات متعددة من الإدخالء تقوم الأداة Gai‏ 
بإنشاء ميزات مكانية بأسماء من 20063_10 إلى لذ_20067عند استخدام الخيار المتقدم . يتم إنشاء هذه الميزات الجديدة 
عن طريق تعيين موقع ميزات تدريب الإدخال لشبكات مكانية متعددة (حتى خمسة) بأحجام مختلفة واستخدام معرفات 
الشبكة كمتغيرات مستقلة فئوية تسمى liag Zone7 id. g>Zone3_id‏ يوفر المعلومات المكانية ذات الصلة للنماذج 
ويساعدهم على تعلم المزيد من البيانات المتاحة. 


تدريب النموذج واختيار النموذج : في خطوة تدريب النموذجء يختار ممارس تعلم الآلة خوارزمية تعلم الآلة المناسبة بناءً 
على المشكلة وخصائص البيانات .ثم يبدأون العملية التكرارية لنماذج التدريب لتناسب البيانات» والتي تتضمن غالبًا تجربة 
العديد من خوارزميات تعلم الآلة .قد تحتوي كل من هذه الخوارزميات على العديد من المعلمات الفائقة المختلفةء وهي قيم 
يتم تحديدها يدويًا بواسطة المستخدم والتي تتحكم في كيفية تعلم النموذج .يتم بعد ذلك ضبط المعلمات الفائقة في محاولة 
لتحسين أداء الخوارزمية وتحقيق نتائج أفضل .تشتمل الخوارزميات أو النماذج الإحصائية المتنوعة على الانحدار الخطي 
والانحدار اللوجستيء ونماذج التعلم JY‏ الأخرى مثل أشجار القرارء والغابات العشوائية» ونماذج التعزيز الأحدث مثل 
le XGBoost. sLightGBM‏ الرغم من أن LightGBM‏ و 680056ايتفوقان على معظم النماذج الأخرى في جميع مجموعات 
البيانات تقريبّاء إلا أنه من الصعب التنبؤ بالنماذج التي doriu‏ بشكل جيد على مجموعة بيانات معينةء لذلك يجب تجربة 
جميع النماذج لمقارنة أدائها قبل اتخاذ قرار بشأن النموذج الذي يناسب البيانات بشكل أفضل ؛ يتم إرجاع مقاييس 
النماذج المختلفة بعد تدريب نماذج الانحدار والتصنيف التي تقوم بتشغيل أداة التدريب باستخدام . AutoML‏ بالنسبة 
لبعض هذه المقاييسء تشير القيمة الأعلى إلى نموذج أفضلء» وبالنسبة للآخرينء تشير القيمة الأقل إلى نموذج أفضل . 
تجميع النموذج : في معظم ULI‏ يؤدي دمج نماذج متعددة في نموذج واحد وأخذ المخرجات من هذا النموذج المدمج إلى 
تفوق النتيجة من نموذج واحد .وتسمى هذه الخطوة تجميع النموذج. 

ضبط المعلمات الفائقة : وهى الخطوة الأكثر صعوبة أثناء تدريب نماذج التعلم الآلي. 

اختيار النموذج : الخطوة الأخيرة في سير عمل تعلم الآلة هي تقييم النموذجء حيث يمكن التحقق من أن خوارزمية تعلم UYI‏ 
المدربة والمضبوطة سوف تعمم بشكل جيد على البيانات التي لم يتم تركيها UU. Lele‏ ما يُشار إلى هذه البيانات غير المرئية 
باسم مجموعة التحقق أو الاختبار ويتم الاحتفاظ بها منفصلة عن بقية البيانات المستخدمة لتدريب النموذج .الهدف من 
هذه الخطوة النهائية هو التأكد من أن خوارزمية ML‏ تنتج دقة تنبؤية مقبولة للبيانات الجديدة. 


في الآونة الأخيرة. ظبر التعلم JYI‏ الآلي (AutoML)‏ كوسيلة لتلبية الطلب على تعلم الآلة في المؤسساتوتهدف AutoML‏ إلى 
إنشاء نظام واحد لأتمتة أكبر قدر ممكن من سير عمل تعلم الآلةء by‏ في ذلك إعداد البيانات. وهندسة الميزات» واختيار 
النموذج» وضبط المعلمات الفائقةء وتقييم النموذج .ومن خلال القيام ces‏ يمكن أن يكون مفيدًا لغير الخبراء من خلال 
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تقليل حاجز الدخول إلى تعلم الآلة» و أيضًا لممارسي تعلم الآلة المدريين من خلال التخلص من بعض الخطوات في سير عمل 
تعلم الآلة. 


يمكن أن يساعد Vas! AutoML‏ في تعزيز إنتاجية ممارمي تعلم الآلة لأنه يلغي بعض الاختيارات الذاتية والتجريب المتضمن 
في سير عمل تعلم الآلة .على سبيل المثالء قد يكون لدى ممارس تعلم الآلة الذي يقترب من مشروع جديد التدريب والخبرة 
اللازمة لإرشاده بشأن الميزات الجديدة التي يجب إنشاؤهاء وأي خوارزمية تعلم الآلة قد تكون الأفضل لمشكلة معينةء وأي 
المعلمات الفائقة هي الأكثر مثالية .ومع ذلك» فقد يتجاهلون إنشاء ميزات جديدة معينة أو يفشلون في تجربة جميع 
المجموعات الممكنة من المعلمات الفائقة أثناء تنفيذ سير عمل تعلم الآلة .بالإضافة إلى AUS‏ قد يتحيز ممارس تعلم الآلة 
عملية Las!‏ الميزات أو اختيار الخوارزمية eed‏ يفضلون خوارزمية تعلم الآلة المعينة fliu‏ على عملهم السابق أو نجاحها في 
تطبيقات تعلم الآلة الأخرى .في الواقع» لا توجد خوارزمية واحدة للتعلم gix JYI‏ أفضل أداء في جميع مجموعات البيانات 
؛ .يمكن أن يساعد AUtOML‏ في تقليل بعض هذا التحيز البشري من خلال تطبيق العديد من خوارزميات ML‏ المختلفة على 
نفس مجموعة البيانات ثم تحديد أي منها يحقق أفضل أداء. 


Go. 


بالنسبة لممارس تعلم الآلةء يمكن أن يكون AutoML‏ بمثابة نقطة بداية أولية أو معيار مرجعي في مشروع تعلم الآلة .ويمكنهيم 
استخدامه لتطوير نموذج أسامي لمجموعة بيانات تلقائيّاء مما يمكن أن يمنحهم رؤى أولية حول مشكلة معينة .قد يقررون 
إضافة ميزات محددة أو إزالتها من مجموعة بيانات الإدخال أو التركيز على خوارزمية تعلم الآلة المحددة وضبط المعلمات 
الفائقة الخاصة بها .وبهذا المعنى. يمكن النظر إلى AutoML‏ كوسيلة لتضييق مجموعة الاختيارات الأولية لممارس ML‏ المدرب» 
Go‏ يتمكنوا من التركيز على تحسين slaf‏ نظام ML‏ بشكل عام .يعد هذا سير عمل شائع الاستخدام حيث يقوم خبراء تعلم 
ATI‏ بتطوير معيار يعتمد على البيانات باستخدام AutoML‏ والبناء على هذا المعيار من خلال دمج خبراتهم لتحسين النتائج. 


يسمح توحيد تعلم ATI‏ باستخدام AutoML‏ في المؤسسة لخبراء المجال بتركيز اهتمامهم على مشكلة العمل والحصول على 
نتائج ALLE‏ للتنفيذء ويسمح لمزيد من المحللين ببناء نماذج أفضلء ويمكن أن يقلل من عدد خبراء تعلم الآلة الذين تحتاجهم 
المؤسسة .ويمكن أن يساعد أيضًا في تعزيز إنتاجية ممارسي تعلم الآلة وعلماء البيانات المدريين» مما يسمح لهم بالتركيز على 
العديد من المهام الأخرى التي تشتد الحاجة Lell‏ 


تحديد النموذج الأفضل 
لتحديد أفضل نموذج باستخدام أداة التدريب باستخدام AUtoML‏ يتبع الخطوات التالية: 


A‏ يل خر وات بمب مكل هو العرار )$9 بسيظة هه oa‏ للق © Rata‏ وا اة 
فحص سرع للبيانات بالإضافة إلى النتائج المتوقعة. 

2. تدريب النماذج المحددة من الخطوة السابقة باستخدام المعلمات الافتراضية من خلال مجموعة من الخوارزميات الأكثر 
تعقيدًا باستخدام المعلمات الفائقة الافتراضية. تتم محاولة ملاءمة نموذج واحد لكل خوارزمية ولجميع الخوارزميات 
المتاحة .) (Extra Tree. Decision Tree sLightGBM 9XGBoost sRandom Forest 9 Linear‏ . 

3 إجراء بحث عشوائي عبر مساحة المعلمات الفائقة لكل خوارزمية للعثور على المجموعة المثالية من المعلمات الفائقة. 
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إنشاء ميزات جديدة عن طريق تحديد Gi‏ من الميزات الجديدة تتمتع بقدرة تنبؤيةء واضافتها إلى مجموعة البيانات الأصلية. 
استخدم المجموعة المثالية من المعلمات الفائقة المحددة في الخطوة 4 لتدريب نموذج واحد أفضل أداءً لكل خوارزميةء وتحديد 
الميزات الأقل أهمية وإزالتها. ؛ يتم دمج النتائج من أفضل النماذج التي تم تدريها حتى الآن .ثم يتم تكديس النماذج ودمج نتائج 
أفضل النماذج (بما في ذلك النماذج المكدسة). 


ensemble إنشاء‎ 


ensemble‏ عبارة عن مجموعة من النماذج التي يتم دمج توقعاتها عن طريق المتوسط المرجح أو التصويت. 


Weight : 25% 


Ensemble 


Weight : 30% Weight : 40% 


الاستراتيجيات الأكثر شيوعًا لإنشاء ensemble‏ هي ) (Random Forest‏ والتي تجمع بين مخرجات النماذج التي تنتمي إلى 
لإنشاء ensemble‏ يمكن اتباع الخطوات التالية: 

اضافة النموذج الموجود في المكتبة والذي يعمل على زيادة أداء المجموعة إلى الحد الأقصى لمقياس Ibal‏ في مجموعة التحقق 
من الصحة. 

تكرار الخطوة السابقة لعدد محدد من التكرارات أو إضافة كافة النماذج. 


يتضمن تكديس النماذج الجمع بين نتائج نماذج متعددة واستخلاص النتيجة منها. 
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Model 1 pase 
Model 2 3. . 
fey, 
Output Ge 


E Feature » z 
Model 3 fetwe3 — — e Meta Model 
Output a P 
gear 


s 
1 Ae 
Model 4 Output oe 


à‏ حين أن أساليب التجميع تجمع بين نتائج النماذج المختلفة من خلال تطبيق أوزان مختلفة على المخرجاتء فإن التراص 
يستخدم مخرجات كل نموذج أسامي كميزات ويضيفها إلى نموذج عالي المستوى: نموذج تعريفي .يتم استخدام مخرجات 
النموذج التعريفي ذي المستوى الأعلى كمخرج ie‏ 


يمكن لأداة التدريب باستخدام AutoML‏ إنشاء 204 HTML‏ كمخرج. 


تعرض الصفحة الرئيسية للتقرير لوحة المتصدرين .تتوفر نفس المعلومات Gaul‏ في نافذة إخراج الأداة. 


Best model name model type metric type | metric value | train time 
1 DecisionTree Decision Tree rmse 251909 11.92 
2 Default LightGBM LightGBM rmse 258718 3.92 
3 Default Xgboost Xqboost rmse 256129 3.85 
4 Default RandomForest Random Forest rmse 250765 5.15 
5 Default ExtraTrees Extra Trees rmse 265653 4.88 
the best Ensemble Ensemble rmse 247234 0.48 


تعرض لوحة المتصدرين النماذج التي تم تقييمها وقيمتها المترية .بالنسبة لمشكلة الانحدارء يعتبر النموذج ذو أقل RMSE‏ هو 
النموذج الأفضل )3( هذه الحالة. نموذج (ensemble‏ . 


يقارن مخطط مربع أداء AutoML‏ أدناه مقياس التقييم للنماذج المختلفة بمقياس التقييم (RMSE)‏ على المحور y‏ والنماذج 
على المحور». كما هو موضح أدناه .يوضح مخطط الصندوق أن أفضل نموذج هو نموذج المجموعة الذي يحتوي على أقل 
RMSE.‏ 
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يوضح مخطط AutoML slaf‏ أدناه كيف يختلف مقياس التقييم للنموذج الأفضل flai‏ وهو في هذه الحالة نموذج 
ensemble‏ » عبر التكرارات المختلفة .يمكن أن يساعد مخطط التكرار في فهم مدى اتساق النموذج عبر عمليات التشغيل 
المختلفة للنموذج. 


AutoML Performance 


3 
#iteration 


وتم إنقناء اباط سبيومان اوضع abst‏ جي التمناذج الق تم تيمها وقظبن التماذع dS Jolley theta! ASSI‏ مى Gill‏ 
الأزرق .على سبيل المثالء تعد مخرجات LightGBM‏ و AXGBoost‏ الأكثر ارتباطًا liag)‏ أمر متوقعء حيث أن كلاهما يعزز 
الخوارزميات) .يشبه الإخراج من LightGBM‏ الإخراج من Lae Random Forest‏ 43 بالإخراج Extra Trees.cyo‏ 
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Spearman Correlation of Models 


Spearman Correlation of Models 


1.00 

1 DecisionTree 
058 

2 Default LightGBM 
096 

3 Default Xgboost 
0.94 

4 Default RandomrForest 
0.92 

5 Default ExtraTrees 
050 
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امعلمات الفائقة الي كم الانياء مها لتدريب التموةج يعن إكمال ضبط المعلمات الفافقة d.‏ هذا المكال» كم Bye caa‏ 
القرار max A,‏ عمق تبلغ3 . 


Decision Tree 
* n jobs: -1 
* criterion: mse 
* max depth: 3 
* explain level: 2 
B LL 


تعرض نفس الصفحة Gai‏ مقاييس أخرى بخلاف تلك التي تم استخدامها للتقييم .في المثال cobai‏ والذي كان عبارة عن 
مهمة انحدارء تم استخدام مقاييس MAE‏ و APE 9R2 9RMSE MSE‏ Mلتقييم‏ النموذج. 
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Metric details: 


Juetric | Score | 


MAE 167416 
MSE 6.34579e+10 
RMSE 251909 
R2 0.549962 
MAPE 0.357589 


يتم أيضًا عرض المخطط المبعثر للمخرجات الفعلية And gible‏ (لعينة مكونة من 5000 نقطة بيانات). يمكن استخدام هذا 
المخطط لتحديد أداء النموذج .توضح الأشكال أعلاه مقارنة المخططات المبعثرة لنموذجين تم الحصول علهما من 
التقرير .النموذج الثاني يقدم أداء أفضل من الأول» حيث تتباعد القيم المتوقعة والحقيقية بشكل أكبر. 


166 Target values vs Predicted values (samples=5000) 


Predicted values 


4 
True values 166 
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Target values vs Predicted values (samples=5000) 


Predicted values 


4 
True values 


ولجعل النماذج AST‏ قابلية للتفسيرء يتم تضمين أهمية كل متغير في النموذج النهائي في التقرير على غرار أهمية الميزة. 


في الرسم البياني أدناه. يمكن تصور التأثير العا مي لكل متغير في مجموعة بيانات الإسكان على النموذج المدرب liag.‏ يوضح 
أن خاصية sqft_living‏ هي الأكثر تأثيراً على النموذج وهي الميزة الأكثر أهمية, يلها عدد Bathrooms‏ وغرف النوم مع التنبؤ 


SHAP Importance 


SHAP feature importance 
mm Leameri 


sqft living 


o0 01 03 04 
mean(|SHAP value]) average impact on model output magnitude 


باستخدام الخيار Basic‏ لدينا خيار رؤية تقرير تحليل البيانات الاستكشافية التلقائي(تقرير(۴0۸ ( الذي يطبع 


altclip.tif: 
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Feature : altclip.tif 


* Feature type : continous 

* Missing : 0.0% 

* Unique : 544 

* Count :544.0 

* Mean :7.955237775714816e-16 

* Std :1.0009203867571839 

e Min :-1.6838853131011084 

٠ 25%th Percentile : -0.9025065180817495 
* 50%th Percentile : 0.035349989811462 
+ 75%th Percentile : 0.8235567806755616 
* Max :1.7053105989144093 


altclip.tif value distribution 


Count 


-15 -10 -05 0.0 0.5 1.0 15 
altclip.tif 
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تطبيق الأداة : 


Geoprocessing vox] 


© Predict Using AutoML ®t 
Parameters Environments Qo 


* Model Definition 


Prediction Type 
Predict feature Md | 


* 


Input Prediction Features 


Explanatory Rasters (2 


- 
| ~| 9 
- 


- ome," 
Distance Features (v) 


Output Prediction Features 


Match Explanatory Variables 
Prediction Of Training 


Match Distance Variables © Training 

= | 

Match Explanatory Rasters (V) Training 
| الاك‎ 


) [ Get explanation for every prediction 


| © Run Y 


Train Using AutoML المدرب الذي تم إنتاجه بواسطة أداة.‎ dlpk. نموذج‎ : Model Definition 
Raster أو‎ Feature نوع ملف الاخراج المطلوب انشاؤه وهو‎ :Prediction Type 


Input Predict Feature‏ :الطبقة المطلوب الحصول على التنبؤ لها. يجب أن يتضمن الإدخال بعض أو كل الحقول اللازمة لتحديد قيمة المتغير 
التابع. 


Explanatory Rasters‏ : قائمة البيانات النقطية التي تحتوي على البيانات النقطية التوضيحية اللازمة لتحديد قيمة المتغير التابع. هذه المعلمة 
مطلوبة إذا تم تعيين معلمة نوع التنبؤ على توقع البيانات النقطية. 


Distanse Feature‏ : تقدير المسافة من ميزات التدريب المدخلة تلقائيًا (معالم النقطة أو المضلعات) واضافتها كمتغيرات توضيحية. 


Match Explanatory Variables‏ : تعيين أسماء الحقول من مجموعة التنبؤ إلى مجموعة التدريب. تستخدم هذه المعلمة إذا كانت أسماء 
حقول مجموعات التدريب والتنبؤ مختلفة. 


Match Explanatory Variables‏ :تعيين أسماء ميزات المسافة من مجموعة التنبؤ إلى مجموعة التدريب. تستخدم هذه المعلمة إذا كانت أسماء 


abad تعيين الأسماء من البيانات النقطية للتنبؤ إلى البيانات النقطية للتدريب. إذا كانت أسماء البيانات‎ : Match Explanatory Raster 


164 


Get explanation for every Prediction‏ :يحدد ما إذا كان سيتم إضافة الحقول التي تمثل أهمية الميزة فيتم إنشاء الحقول لكل عينة متوقعة 
بالإضافة إلى قيم التنبؤ. 

: Train Using Auto ML أداة‎ 

تستخدم هذه الأداة لتدريب نموذج تعلم ألة من خلال بناء مسارات تدريب وأتمتة جزء كبير من عملية التدريب؛ تتضمن 
الصفحة الأولى في تقرير المخرجات روابط لكل نموذج من النماذج التي تم تقييمها وتعرض أداءها في مجموعة بيانات التحقق 
من الصحة بالإضافة إلى الوقت المستغرق لتدريها. واستنادًا إلى مقياس التقييم» يعرض التقرير النموذج الأفضل lai‏ الذي 
تم اختياره. 

وكما سبق olo‏ ذكرنا RMSE‏ هو مقياس التقييم الافتراضي لمشكلات الانحدار(التوقع ) « في حين أن Logloss‏ هو المقياس 
الافتراضي لمشكلات التصنيف. كما تتوفر المقاييس التالية في تقرير المخرجات: 

التصنيف .F1 .Logloss AUC:‏ الدقةء متوسط الدقة 

الاتحد|ر (MAPE R2 «MAE «RMSE «MSE:‏ معامل سبیرمان» معامل بيرسون ؛ عند النقر فوق مجموعة نماذج» يتم عرض 
تفاصيل حول التدريب الخاص بمجموعة النماذج هذه بما في ذلك منحنيات التعلم ومنحنيات الأهمية المتغيرة والمعلمات 
الفائقة المستخدمة وما إلى ذلك. 


Geoprocessing «nx 


€ Train Using AutoML + 


Parameters Environments 


* Input Training Features 
* Output Model 
x Variable to Predict 


Treat Variable as Categorical 4 
Explanatory Training Variables 
Variable 3% Categorical 


5 


Explanatory Training Distance Features (v 


6 


x 
Explanatory Training Rasters (v Categorical 
E 
Add Image Attachments 
Total Time Limit (Minutes) 
AutoML Mode 
Basic 9 


v Advanced Options 


Algorithms (v 


Validation Percentage 


v Additional Outputs 
Output Report 


قر ال الى سوه ا معا ماه الودج 
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حقل من Aa do‏ الإدشال le grees gall‏ القيع الى سيت Lala‏ لري الوذه 

يحدد ما إذا كان سيتم التعامل مع قيمة الظاهرة Variable to Predict‏ كمتغير فئوي.واذا ام يحدد 
سيتم التعامل مع قيمة المتغير المراد التنبؤ به على أنه مستمر وسيتم تنفيذ الانحدار. 

قائمة الحقول التي تمثل المتغيرات التوضيحية التي ستساعد في التنبؤ. ؛ تحديد خانة 

الاختيار éli Categorical‏ عن أي متغيرات تمثل الفئات. 

الميزات التي سيتم تقدير مسافاتها من ميزات تدريب الإدخال تلقائيًا وإضافتها كمتغيرات توضيحية 
si‏ 

البيافات النقطية الق سق اسمغرا عقيمها من lodi‏ التقطية واعتبارها رات توضيحية 
للنموذج. 

إجمالي الحد الزمني بالدقائق الذي يستغرقه التدريب على نموذج AutoML.‏ الافتراضي هو 240 )4 
ساعات). 

تحديد نوع النموذج هل هو liag Advanced - Intermedate -Basic‏ يؤثر على الوقت المستغرق 
حيث يتم اجراء مجموعة من العمليات الاضافية فى حالة المتقدم مثل هندسة البيانات ؛ وضبط 
المعلمات الفائقة ؛ يتم استخدام المتوسط لتدريب النموذج الذي سيتم استخدامه في حالات 
الاستخدام الواقفية حي يستكدم هذا الوظيع Gari‏ من ade lil] Ayal‏ بكسمة Alaa)‏ وين 
مخرجات منحنيات التعلم ومخططات الأهمية في التقاريرء دون مخططات SHAP‏ غير متوفرة. بينما 
يتم استخدام المستوى المتقدم للحصول على أقصى قدر من الأداء فيستخدم التحقق المتقاطع 
بعشرة أضعاف ويقوم بهندسة الميزات وضبط المعلمات الفائقة. يتم تعيين ميزات التدريب على 
الإدخال إلى شبكات مكانية متعددة بأحجام مختلفة fliu‏ على موقعهاء ويتم تمرير معرفات الشبكة 
المقابلة كمتغيرات توضيحية فئوية إضافية للنموذج. 

ao‏ الخوارؤميات الق سيتم eral‏ اما etl‏ التدريب ؛ بشكل اقتراضي. ative‏ استخدام كافة 
الغوارزميات وهتاك مجموغة من القواروميات oi Ss A‏ 

7 االخطي: سيتم استخدام خوارزمية الانحدار الخطي الخاضعة للإشراف لتدريب نموذج التعلم 
الآلي للانحدار. إذا كان هذا هو الخيار الوحيد المحددء فتأكد من أن إجمالي عدد السجلات أقل من 
0 وعدد الأعمدة أقل من 1000. يمكن أن تستوعب النماذج الأخرى مجموعات بيانات أكبر 
ويوصى باستخدام هذا الخيار مع خوارزميات أخرى وليس كخوارزمية وحيدة. 

Random Tree‏ الأشجار العشوائية : سيتم استخدام خوارزمية التعلم الآلي الخاضعة للإشراف 
و عن شهرة قراراق فار Al eal‏ يكن EE ERRIA aa Lal‏ 
:XGBoost‏ سيتم استخدام خوارزمية التعلم الآلي الخاضعة للإشراف XGBoost‏ لتعزيز التدرج 
الشديد يمكن استخدامه لكل من التصنيف والانحدار. 
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10 


Light GBM‏ سيتم استخدام خوارزمية المجموعة المعززة لتدرج Light GBM‏ والتي تعتمد على 
أشجار القرار. يمكن استخدامها لكل من التصنيف والانحدار. تم تحسين Light GBM‏ لتحقيق 
الأداء العالي مع الأنظمة الموزعة. 

Disision Tree‏ شجرة القرار: يتم استخدام خوارزمية التعلم الآلي الخاضعة للإشراف على شجرة 
القرارء والتي تصنف البيانات باستخدام إجابات صحيحة وخاطئة (0,1) . يمكن فهم أشجار القرار 
بسهولة وهي جيدة للتفسير. 


lO Algorithms (V) 
x 8 
valid Random Trees 
XGBoost 
Light GBM | 
Decision Tree 
Extra Tree 


v Add 
Out 


Outg 
Linear 


i ^a. CatBoost 


Outg 


Extra Tree‏ الشجرة الإضافية : سيتم استخدام مجموعة الشجرة الإضافية لخوارزمية التعلم الآلي 
الخاضعة للإشرافء Allg‏ تستخدم أشجار القرار. تشبه هذه الخوارزمية الأشجار العشوائية ولكنها 
يمكن أن تكون أسرع. 


CatBoost‏ :سيتم استخدام خوارزمية .280056 )ويستخدم أشجار القرار للتصنيف والانحدار. 


نسبة التحقق من الصحة : النسبة المئوية لبيانات الإدخال التي سيتم استخدامها للتحقق من 
الصحة. القيمة الافتراضية هي 10. 
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11 


v Additional Outputs 


| @ Output Report 
12 lag 
Output Importance Table 
13 am 
Output Feature Class 
14 = 
v Fairness Options 
Sensitive Feature Attributes 
Sensitive Features (v) Ls Underprivileged Groups 


. 88 


Fairness Metric 


Equalized odds difference 


1- تقرير الإخراج الذي سيتم إنشاؤه كملف . html.‏ فسيتم إنشاء التقرير في مجلد جديد ضمن المسار المقدم. 
سيحتوي التقرير على تفاصيل النماذج المختلفة بالإضافة إلى تفاصيل المعلمات الفائقة التي تم استخدامها أثناء 
التقييم وأداء كل نموذج. 

2- جدول مخرجات يحتوي على معلومات حول أهمية كل متغير توضيحي المستخدمة في النموذج. 

13- طبقة المعالم التي تحتوي على القيم المتوقعة بواسطة النموذج الأفضل أداءً في طبقة التدريب. يمكن استخدامه 
للتحقق من أداء النموذج من خلال مقارنة القيم المتوقعة بصريًا مع الحقيقة الأساسية. 

4- تقييم وتحسين عدالة النماذج المدربة للبيانات الجدولية لنماذج التصنيف والانحدار. بتعيين المطلبين التاليين 
لهذه المعلمة: 

Sensitive Features *‏ : سمة Jio‏ العرق أو الجنس أو الحالة الاجتماعية والاقتصادية أو العمر التي يمكن أن تؤدي إلى 

التحيز في التعلم الآلي أو نماذج التعلم العميق. من خلال اختيار السمات الحساسة مثل العرق أو الجنس أو الحالة 

الاجتماعية والاقتصادية أو العمرء يتم تخفيف التحيزات المرتبطة بالسمات الحساسة المحددة لنموذج غير متحيز. 


Underprivileged Groups *‏ :المجموعة التي تم تمييزها من قيمة الميزة الحساسة المتوفرة. 
(ita Whaat aks‏ 


https://pro.arcgis.com/en/pro-app/latest/tool-reference/geoai/how-fairness-works.htm 


sues -15‏ ماين ادا الى مسقم اتد اما aaa‏ الغدالة ISL‏ الصف Leal eral is illo colos‏ 
لمات tend)‏ على الشركة MegaraSling alo EN jit!‏ ين الاس ف: 

Demographic Parity Ratio °‏ نسبة التكافؤ الديموغرافي : يُستخدم هذا المقياس في نماذج التصنيف. وسيتم 
قياس pad‏ معدلات الأخعيار بين مجموعات ملغتلفة من الأفران. معدل الاختيان هو al dA aud‏ الذين ثم 


تصنيفهم على أنهم إيجابيون بواسطة النموذج. القيمة المثالية لهذا المقياس هي 1ء مما يشير إلى أن معدلات 
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الاختيار للمجموعات المختلفة متساوية. goli‏ عدالة هذا المقياس بين 0.8 إلى 1ء مما يعني أن نسبة معدلات 
الاختيار بين المجموعات يجب ألا تزيد عن 20 بالمائة. 

Demographic Parity Differance‏ فرق التكافؤ الديموغرافي : يُستخدم هذا المقياس في نماذج التصنيف. وهو 
مشابه لمقياس نسبة التكافؤ الديموغرافي»: ولكن سيتم قياس الفرق في معدلات الاختيار بين مجموعات مختلفة من 
الأفرادء وليس النسبة. معدل الاختيار هو نسبة الأفراد الذين تم تصنيفهم على أنهم إيجابيون بواسطة النموذج. 
القيمة المثالية لهذا المقياس هي 60 مما يشير إلى عدم وجود فرق في معدلات الاختيار بين المجموعات. تتراوح عدالة 
هذا المقياس بين 0 إلى 60.25 مما يعني أن الاختلافات في معدلات الاختيار بين المجموعات يجب ألا تزيد عن 25 
GUL‏ 

Equalized odds ratio‏ نسبة الأرجحية المتساوية : يُستخدم هذا المقياس في نماذج التصنيف. سيتم قياس نسبة 
معدلات الخطأ بين مجموعات الأفراد. مثل المجموعات العرقية المختلفة. القيمة المثالية لهذا المقياس هي 1ء مما 
يشير إلى أن معدلات الخطأ للمجموعات المختلفة متساوية. تتراوح عدالة هذا المقياس بين 0.8 إلى 1» مما يعني أن 


نسبة الخطأ بين المجموعات يجب ألا تزيد عن 20 بالمائة. 


) Fairness Metric 

1[ | كسم 
Demographic parity ratio‏ 

Demographic parity difference 


= Equalized odds ratio " 
| Equalized odds difference n 
Group loss ratio I 


Equalized odds difference‏ فرق الاحتمالات المتساوبة :يُستخدم هذا المقياس في نماذج التصنيف. وهو مشابه 
لمقياس نسبة الأرجحية المتساويةء ولكن سيتم قياس الفرق في الخطأ بين مجموعات مختلفة من الأفرادء بدلا من 
النسبة. القيمة المثالية لهذا المقياس هي 0, مما يشير إلى عدم وجود فرق في الخطأ بين المجموعات. تتراوح عدالة هذا 
المقياس بين 0 إلى 0.25 مما يعني أن الفرق في الخطأ بين المجموعات يجب ألا يزيد عن 25 بالمائة. 

نسبة خسارة المجموعة : يُستخدم هذا المقياس في نماذج الانحدار. سيتم قياس نسبة متوسط الخسارة أو الخطأ 
لمجموعة فرعية واحدة مقارنة بمجموعة فرعية أخرى. ويوفر مقياسًا نسبيًا للتفاوت في الخسائر بين المجموعات. 
وتشير القيمة 1 إلى عدم وجود اختلاف في الخسائر بين المجموعتينء في حين تشير القيم الأكبر أو الأصغر من 1 إلى 
التفاوتات النسبية. 
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Text Analysis صندوق أداوت‎ 


4 | Rx GeoAl Tools 

> جك‎ Feature and Tabular Analysis 

P جك‎ Imagery Al 

4 & Text Analysis 
Classify Text Using Deep Learning 
Extract Entities Using Deep Learning 
Train Entity Recognition Model 
Train Text Classification Model 
Train Text Transformation Model 


Transform Text Using Deep Learning 


:Classify Text Using Deep Learning أداة‎ 


Geoprocessing 
(e Classify Text Using Deep Learning 


Parameters Environments 


الطبقة أو الجدول التي يحتوي على النص الذي سيتم تصنيفه وتسميته. 


الحقل النصي قي طبقة الإدخال أو الجدول التي يحتوي على النص الذي سيتم تصنيقه. 


Input Model Definition File 1‏ »> النموذج المستخدم والمدرب سايقاً. 
m hitps.//www.rcgis.com/sharing/rest/content/items/8df3bf4167bc4c ias‏ 


اسم الحقل التي يحتوي على القئة بواسطة النموذج. اسم الحقل الاقتراضي هو ClassLabel.‏ 


Value 
[ sequence length [ 512 
| 


وسيطات إضاقية: مثل التسلسل والطول أو عتبة الثقة» التي سيتم استخدامها لضبط مخرجات التموذج. 


عدد عينات التدريب التي سيتم معالجعا قي المرة الواحدة. القيمة الافتراضية هي 4. يمكن أن تؤدي زبادة الحجم إلى تحسين أداء 
الأداة؛ ولكن يتم استخدام المزيد من الذاكرة. وقي حالة حدوث خطأ نفاد الذاكرةء يتم تصغير الحجم .يتم إنشاء شرح SHAP‏ 


لكل صف في جدول الإخراج. 


— | Get explanation for every prediction 


C M— © 
View Details Open History 


® Classify Text Using Deep Learning 


Running... 
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: Extract Entities Using Deep Learning أداة‎ 


تشغيل نموذج مُدرب للتعرف على الكيانات المسماة على ملفات نصية في مجلد Entitiesz liuc‏ الكيانات والمواقع Ute)‏ 
العناوين وأسماء الأماكن أو الأشخاص والتواريخ) في جدول. إذا كانت الكيانات المستخرجة تحتوي على Glare‏ تقوم الأداة 
بترميز العناوين جغرافيًا باستخدام محدد المواقع المحدد وتنتج فئة المعالم كمخرجات. 

ولكن التساؤل الذى يتبادرالى أذهاننا الآن كيف يعمل نموذج التعرف على الكيان؟ 

التعرف على الكيان» والمعروف Gai‏ باسم التعرف على الكيانات المسماة(N۴۸)‏ » هو عملية استخراج المعلومات من الجمل 


تقوم أداة Train Entity Recognition Model tool‏ بتدريب نماذج البرمجة اللغوية العصبية لاستخراج مجموعة محددة 
مسبقًا من الكيانات Ute)‏ المؤسسات أو الأشخاص أو التاريخ أو البلد) المقدمة كجزء من مجموعة بيانات التدريب. يمكن 
استخدام نماذج التعرف على الكيانات المدربة مع أداة استخراج الكيانات باستخدام التعلم العميق لاستخراج تلك الكيانات 
plate dali d] eii gall ge‏ 


فيتم استخراج البيانات مثل الموقع أو التاريخ والوقت كما موضح بالشكل أدناه t‏ يمكن أن يساعد ذلك في تحديد المناطق 
التي تحتاج إلى مساعدة فورية أثناء وقوع كارثة طبيعية. 


Date 
30/01/2015 
Person stuck in lift in 
XYZ Time of Incident 
30/01/2015 - 16:36 Entity Recognition Model ages 
Location: Abc Street, 


XYZ 


Location 


Abc Street, XYZ 


تعتمد نماذج التعرف على SLLS‏ في ArcGIS‏ على خلفيتيين أحدهما تعتمد على بنية Transformer‏ والآخرى تعتمد على 
مكتبة spaCy‏ التي تعمل على إطار عمل التضمين والتشفير والحضور والتنبؤ. 
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o‏ التضمين : يتم تحويل النص الُدخل إلى تضمينات كثيفة للكلمات. تلتقط هذه التضمينات المعلومات الدلالية من 
النص Lue dll‏ كما Lal‏ أسهل بكثير في التعامل مع النموذج. 


e‏ التشفير: حيث يتم ترميز السياق في متجه الكلمات. يتم ذلك باستخدام الشبكات العصبية التلافيفية ثلاثية 
الأبعاد (CNN). iall‏ 
Context less word embeddings Embeddings with context‏ 


BEBED = 


٠‏ الحضور: يتم تقليل مخرجات المصفوفة من الخطوة السابقة إلى متجه واحد سيتم تمريره للتنبؤ. هذه الخطوة لبا 
تأثير مماثل لآلية الانتباه. 


e‏ التنبؤ :الخطوة الأخيرة في النموذج هي إجراء توقع بالنظر إلى النص JSAM‏ هنا يتم تمرير المتجه من طبقة الانتباه 
إلى إدراك متعدد الطبقات لإخراج معرف تسمية الكيان. 
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> تشتمل نماذج التعرف على الكيانات في ArcGIS‏ على مكونين: 


Encoder e‏ laÎة‏ التشفير: تقوم بتحويل نص الإدخال إلى Feature‏ في vectors (JS‏ ذات حجم ثابت. يستخدم النموذج 
goly‏ تشفير معروفة مثل BERT‏ و ROBERTa ALBERT‏ التي تعتمد على بنية المحولات وتم تدريها مسبقًا على كميات 
ضخمة من النصوص. 

Level Classifier o‏ مصنف مستوى الرمز المميز: يعمل على تصنيف تمثيل Feature‏ لكل رمز مميز إلى فئات متعددة 
تقل الكيانات Aske!‏ غالا ما يكوخ Abas Ab canal‏ بسيظة ق الشبكة العصبية 


Date 
30/01/2015 


People stuck in lift in 
XYZ Time of Incident 
30/01/2015 - 16:36 
Location: Abc Street, 


Location 
Abc Street, XYZ 


entity recognition model; GU SI استخدم نماذج التعرف على‎ 

يمكن استخدام أداة Extract Entities Using Deep Learning‏ لتطبيق نموذج التعرف على الكيانات المدربة على النص غير 
malit‏ وا ففرا المعلومات المقيدة مدق شكل يانات Aaa‏ يمكن استخداء cibus‏ التعرف غل الكيابات المدرية يما 
من gÎArcGIS Living Atlas of the World‏ تدريب نماذج خاصة باستخدام أداة . Train Entity Recognition Model‏ 


n 


تقوم الأداة بإنشاء جدول يحتوي على الكيانات المستخرجة من كل ملف نصي في مجلد الإدخال. إذا تم توفير محدد المواقع 
وتمكن النموذج من استخراج العناوين» فسيتم إنتاج فئة المعالم بدلاً من ذلك عن طريق الترميز الجغرافي للعناوين 
المستخرجة. إذا كان الملف النصي يحتوي على عناوين dadais‏ فسيتم إنشاء الميزة عن طريق الترميز الجغرافي لكل عنوان 
وتكرار الكيانات الأخرى لهذا الملف التصي. 
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ملحوظة : يمكن تشغيل الأداة على وحدات المعالجة (CPUS) A‏ لكن يوصى استخدام وحدة معالجة الرسومات (GPU)‏ 
للمعالجة. 


أداة Train Entity Recognition Model‏ 
تقوم بتدريب نموذج التعرف على الكيان | owed‏ لاستخراج مجموعة محددة مسبقًا من الكيانات من النصوص الخام. 


متطلبات عمل الأداة : 


Geoprocessing 


© Train Entity Recognition Model 
Parameters Environments 


* Input Folder 


Pretrained Model File 


* 


Output Model 


Address Entity 


Max Epochs 


v Model Parameters 
Model Backbone 


spacy 
Batch Size 


Model Arguments 
Name Value 


sequence length 512 


v Advanced 
Learning Rate 


Validation Percentage 


[v] Stop when model stops improving 
[v] Make model backbone trainable 


Input Folder‏ : مجلد يحتوي على بيانات التدريب في NER. ald dataset JKA‏ ؛ فيما يلي أنواع مجموعات البيانات 
المدعومة: 
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ner_json‏ يجب أن يحتوي مجلد بيانات التدريب على ملف json.‏ يحتوي على نص وكيانات ذات علامة منسقة 


باستخدام تنسيق تدريب spaCy JSON.‏ 


التعلم القائم على التحويل". 


يجب أن يحتوي مجلد بيانات التدريب على الملفين التاليين بتنسيق CSV:‏ 


token.csv ©‏ يحتوي على نص كأجزاء إدخال. 
tag.csv ©‏ يحتوي على علامات IOB‏ لأجزاء yal‏ 


BILUO ٠‏ امتداد لتنسيق 108 الذي يحتوي بالإضافة إلى ذلك على علامتي الوحدة ١‏ و.لا 


يجب أن يحتوي مجلد بيانات التدريب على الملفين التاليين بتنسيق CSV:‏ 


لاو.ع»اه]يحتوي على نص كأجزاء إدخال. 


* -لاق.38]يحتوي على علامات BILUO‏ لأجزاء النص. 


pretrained model File‏ : نموذج تم تدريبه مسبقًا والذي سيتم استخدامه bual‏ النموذج الجديد. 

Address Entity‏ : كيان عنوان سيتم التعامل معه كموقع. أثناء الاستدلال» سيتم ترميز هذه الكيانات جغرافيًا باستخدام 
محدد المواقع المحددء وسيتم إنتاج feature class‏ نتيجة لعملية استخراج الكيان. IS]‏ لم يتم توفير محدد المواقع أو لم يقم 
النموذج المدرب باستخراج كيانات العنوان» فسيتم إنتاج جدول يحتوي على الكيانات المستخرجة. 
Max Epochs‏ : الحد الأقصى لعدد المرات التي سيتم تدريب النموذج علها. الحد الأقصى لقيمة المرة هو 1 يعني أنه سيتم 
تمرير مجموعة البيانات للأمام والخلف عبر الشبكة العصبية مرة واحدة. القيمة الافتراضية هي 5. 


Model Backbone‏ : يحدد الشبكة العصبية المكونة مسبمًا والتي سيتم استخدامها كبنية لتدريب النموذج الجديد. 
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© Model Backbone 
spacy 5 
bert-base-cased 
roberta-base 
albert-base-v1 
xInet-base-cased 
xlm-roberta-base 
distilroberta-base 
distilbert-base-cased 


spacy 
Validation Percentage 1 10| 


Iv] Stop when model stops improving 


|v] Make model backbone trainable 


O) Run ~ 


bert-base-cased ٠‏ : سيتم تدريب النموذج باستخدام شبكة BERT‏ العصبية. تم تدريب BERT‏ مسبقًا باستخدام هدف 
نمذجة اللغة المقنعة والتنبؤ بالجمل التالية. 

roberta-base °‏ : سيتم تدريب النموذج باستخدام شبكة ROBERTA‏ العصبية. يقوم ROBERTA‏ بتعديل المعلمات الفائقة 
الرئيسية BERT J‏ مما يلغي هدف التدريب المسبق وتدريب الجملة التالية بدفعات صغيرة ومعدلات تعلم أعلى. 

:albert-base-v1 ٠‏ سيتم تدريب النموذج باستخدام شبكة ALBERT‏ العصبية. يستخدم ALBERT‏ خسارة خاضعة للإشراف 
الذاتي والتي تركز على نمذجة التماسك dull‏ مما يؤدي إلى قابلية التوسع بشكل أفضل من BERT.‏ 

xInet-base-case- *‏ : سيتم تدريب النموذج باستخدام شبكة XLNet‏ العصبية. XLNet‏ هي طريقة تدريب مسبقة ذات انحدار 
ذاتي معممة. فهو يسمح بتعلم سياقات ثنائية الاتجاه من خلال تعظيم الاحتمالية المتوقعة على جميع التباديل في ترتيب 
التحليلء مما يتغلب على عيوب BERT.‏ 

xlm-roberta-base °‏ : سيتم تدريب النموذج باستخدام الشبكة العصبية XLM-RoBERTa. XLM-RoBERTa‏ هو نموذج 
متعدد اللغات تم تدريبه على 100 لغة مختلفة. على عكس بعض نماذج XLM‏ متعددة اللغات» لا يتطلب الأمر Shige‏ اللغة 
لفهم اللغة المستخدمة وتحديد اللغة الصحيحة من معرفات الإدخال. 

DistiIRoBERTa -distilroberta-base +‏ :هو نموذج للغة الإنجليزية تم تدريبه rua‏ بإشراف roberta-base‏ فقط على 
.OpenWebTextCorpus‏ وهو نسخة من مجموعة بيانات WebText‏ الخاصة ب OpenAl.‏ 

ditilbert-base-cased °‏ : سيتم تدريب النموذج باستخدام شبكة DistiIBERT‏ العصبية. DistiIBERT‏ هو نموذج أصغر 


لتمثيل اللغة للأغراض العامة. 


1/6 


spacy ٠‏ : سيتم تدريب النموذج باستخدام الشبكة العصبية SpaCy. SpaCy‏ هي مكتبة مفتوحة المصدر لمعالجة اللغات 
الطبيعية المتقدمة. 

Learning Rate‏ : يشير إلى مقدار تعديل أوزان النموذج أثناء عملية التدريب. إذا لم يتم تحديد أي قيمةء فسيتم استنتاج 
معدل التعلم الأمثل تلقائيًا. 

Validation Percentage‏ : النسبة المئوية لعينات التدريب التي سيتم استخدامها للتحقق من صحة النموذج. القيمة 


الافتراضية هي 10. 


Train Text Classification Model أداة‎ 


لتدريب نموذج تصنيف نص فردي أو متعدد التسمية لتعيين فئة أو تسمية محددة مسبقًا لنص غير منظم. 

تقوم أداة "ain Text Classification Model‏ بتدريب نماذج البرمجة اللغوية العصبية (NLP)‏ لتصنيف النص بناءً على 
الفئات أو الفئات المعروفة المقدمة كجزء من مجموعة بيانات التدريب. يمكن استخدام النماذج المدربة مع أداة تصنيف 
النص باستخدام التعلم العميق لتصنيف النص المماثل إلى تلك الفئات. 


380, New York St Text Classification Model 


Redlands CA (Address Classifier) US 


التنبؤ بالبلد الذي ينتمي إليه العنوان غير المكتمل. 


نماذج تصنيف النص في ArcGIS‏ عبارة عن شبكات عصبية عميقة تحتوي على مكونين: 


e 


o‏ أداةالتشفير 
Classifier‏ 
New York St Encoder sif‏ ,380 
Redlands CA (BERT) HD) » US‏ 
e‏ المصنف 
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Input‏ :الجدول أو feature class‏ المطلوب تدريب النموذج عليه 


dà»: Text Field‏ نصي في feature class‏ أو الجدول الذي يحتوي على النص الذي 


Label Field‏ :حقل نصي يحتوي على تسميات الفئة المستهدفة لتدريب النموذج. في 
حالة تصنيف النص متعدد العناوين» يتم تحديد أكثر من حقل نصي. 

Pretrained Model File‏ : نموذج تم تدريبه مسبقًا والذي سيتم استخدامه لضبط 
النموذج الجديد.؛يجب أن يتم تدريب النموذج المدرب مسبقًا بنفس نوع النموذج 
والنموذج الأسامي الذي سيتم استخدامه لتدريب النموذج الجديد. 

Model Backbone‏ : يحدد الشبكة العصبية المكونة مسبقًا والتي ستكون بمثابة 
أداة التشفير للنموذج واستخراج تمثيلات الميزات لنص الإدخال في شكل متجهات 


ذات طول ثابت. 


Geoprocessing yox 
© Train Text Classification Model 6 
Parameters Environments © 
* Input Table p 
Y 
* Text Field 
* Label Field Of 
Pretrained Model File 
* Output Model 
Max Epochs 5 
v Model Parameters 
Model Backbone 
bert-base-cased id 
Batch Size 2 
Model Arguments 
Name Value 
sequence_length 512 
v Advanced 
Learning Rate 
Validation Percentage 10 
[v] Stop when model stops improving 
[v] Make model backbone trainable ^^ 


Train Text Transformation Model أداة‎ 


تقوم بتدريب نموذج تحويل النص على تحويل النصوص أو ترجمتها أو تلخيصها. 


1000 Pnie Avenue, 


Redlands, California 


1000 Pine Ave, 
Redlands CA 


يمكن لنموذج تحويل النص تصحيح الأخطاء الإملائية وتوحيد عناوين الشوارع. 
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Geoprocessing 


© Train Text Transformation Model e 


Parameters Environments 


O Input Table 
m—— مس‎ 


* Text Field 


Jii‏ ا 


* Label Field 


x 


Pretrained Model File 


ابا 
Output Model‏ * 
n——— |‏ 


Max Epochs 


v Model Parameters 
Model Backbone 


t5-base 


Batch Size 


Model Arguments 
Name 


sequence eat 


> Advanced 


3 


Value 


:Transform Text Using Deep Learning أداة‎ 


تستخدم لتشغيل نموذج تسلسل إلى تسلسل مُدرب في حقل نص في feature class‏ أو جدول وتحديثه بحقل جديد يحتوي 


على النص المحول أو المترجم. 
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Geoprocessing 


© Transform Text Using Deep Learning 


Parameters Environments 


* Input Table 
| 


© The Input Table will be modified. 
+ Text Field 


* Input Model Definition File 
EE. 


Result Field 


Model Arguments 
Name 


Y Advanced 
Batch Size 


Minimum Sequence Length 
Maximum Sequence Length 


: Time Series Al مجموعة أداوات‎ 


4 És Time Series Al 
g Forecast Using Time Series Model 
& Train Time Series Forecasting Model 
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: Forecast Using Time Series Model أداة‎ 

placa 42525 عل اهام البق والذي خم‎ tld E E A باسمعداع موتح‎ A كل مرق‎ mui ls 
Train Time Series Forecasting Model. أداة‎ 

تستخدم هذه الأداة نماذج التنبؤ بالسلاسل الزمنية القائمة على التعلم العميق. تتمتع نماذج التعلم العميق بقدرة عالية 
على التعلم وهي مناسبة للسلاسل الزمنية التي تتبع اتجاهات معقدة ويصعب تصميمها باستخدام وظائف رياضية بسيطة. 
ومع cells‏ فإنها تتطلب حجمًا أكبر من بيانات التدريب لتعلم مثل هذه الاتجاهات المعقدة واستخدام المزيد من الموارد 
الحسابية للتدريب والاستدلال. 


يمكن استخدام Outlier Option‏ للكشف عن القيم المتطرفة ذات الأهمية الإحصائية في قيم السلاسل الزمنية في كل موقع. 


Geoprocessing “yox 
الذي يحتوي على المتغير الذي سيتم‎ netCDF :مكعب‎ Input Time Series Data © Forecast Using Time Series Model ® 
Parameters Environments @ 


Input Time Series Data‏ * استخدامه للتنبؤ بالخطوات الزمنية المستقبلية. يحب أن يحتوي هذا الملف على 


Ir] 
Space ويجب أن يكون قد تم إنشاؤه باستخدام أداة إنشاء‎ NC vale ملحق‎ + Model Definition 
* Output Features 
.Time Cube 
Output Cube 
) emd. أو‎ dlpk.) ملف نموذج التعلم العميق المدرب‎ : Model Definition - |= 


Number of Time Steps to Forecast | 
Match Explanatory Variables 


Prediction (v) Training‏ الذي سيتم استخدامه لإجراء التنبؤات. يمكن تدريب النموذج باستخدام أداة 


Outlier Option‏ نموذج التنبؤ بالسلسلة الزمنية. 


None 


Output Cupe‏ :ملف nc.‏ يحتوي على قيم مكعب الزمكان المدخل مع الخطوات 
الزمنية المتوقعة الملحقة به. ويمكن استخدم أداة Visualize Space Time Cube‏ 


في صورة ثلاثية الأبعاد لرؤية جميع القيم المرصودة والمتوقعة في وقت واحد. 


[6 Run ~v 
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أداة ‘Train Time Series Forecasting Model‏ 
تقوم هذه الأداة بتدريب نماذج التنبؤ بالسلاسل الزمنية باستخدام نماذج مختلفة قائمة على التعلم العميقء مثل الشبكة 
المتصلة بالكامل .FCN))‏ والذاكرة الطويلة قصيرة المدى «ResNets .InceptionTime g .LSTM)‏ و (ResCNN.‏ ؛ تدعم هذه 
النماذج السلاسل الزمنية متعددة المتغيرات» حيث يتعلم النموذج من AST‏ من متغير تابع للوقت للتنبؤ بالقيم المستقبلية. 
يتم حفظ النموذج المدرب كملف حزمة التعلم العميق (. dlpk)‏ ) ويمكن استخدامه للتنبؤ بالقيم المستقبلية باستخدام أداة 


Forecast Using Time Series Model 


Geoprocessing vBX 
© Train Time Series Forecasting Model 26 
Parameters Environments Q 


* Input Time Series Data 


* Output Model 


* Analysis Variable 


* Sequence Length 


Explanatory Training Variables 
Variables © Categorical 


| 3 
Max Epochs 20 


Number Of Time Steps to Exclude 
for Validation 


v Model Parameters 
Model Type 


InceptionTime M 


Batch Size 64 


Model Arguments 
Name Value 


v] Stop training when model no longer improves 


v Additional Output 
Output Feature Class 


Output Cube 
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القصل السادس تطبيقات الذكاء الاضطناعى الجيومكاق 


ArcGIS Pro على برنامج‎ 
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1- استخراج المبانى من الصورالفضائية 
الحصول على 2 بعض النماذج 
https://livingatlas.arcgis.com/en/browse/#d=2‏ 


Building Footprint يتم اختيار‎ - 


Support Q Sign Ir 


“Building Footprint Extraction - USA" x E 


Q al m & 3 r1 A e 


All Trending v Basemaps v Imagery ~v Boundaries v People v Infrastructure v Environment v 


All content types v All ime v All regions v 


Sort by: Relevance v 


ES 


Building Footprint Extraction ٠ USA Building Footprint Extraction - New Zealand 


- بعد ذلك يتم عمل تحميل للنموذج على الجهاز ؛ ويمكن استعدعاؤه مباشرة من الاداة التالية 


Detect Objects Using Deep Learning يتم استخدام أداة‎ - 


— v Geoprocessing vox 
Model Definition x 5 z 3 | 
© Detect Objects Using Deep Learning e | 

)2©( )3( 69 |F] v Living Atlas Search Results for ‘building’ ~ | أن‎ [2| V7 | building X v | 
Organize v New Item v Ew) | Parameters Environments Q 
4 @ Portal x Title Type Input Raster 

b @ My Content M|| 3X» Building Footprint Extraction - USA © © © Deep Learnin Qassem Pilot.tif ¥ | 

| x ; 
b @ My Favorites | 3% Building Footprint Extraction - Africa Q © @ Deep Learnin Output Detected Objects 
| : Qassem Pilot DetectObjectsUs | a 
b My Groups 3 Building Footprint Extraction - China Q )© Deep Learnin = 
^ x Model Definition E 
b [^ My Organization I> Building Footprint Extraction - Australia © © )© Deep Learnin ] æ 
b & ArcGIS Online 3 > Building Footprint Extraction - KSA 2 © Deep Learnin Arguments 
(B) Living Atlas Name Value 

4 [ Computer 

b 3* Quick access |_| Non Maximum Suppression 

SS > 
b ® This PC 1 : 
^ N ness EA Find more items... 
Name | Building Footprint Extraction - Australia Deep Learning Model files (dlpk, e > 
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Geoprocessing vO x Geoprocessing vO x 


Detect Objects Using Deep Learni 
GE an GF © Detect Objects Using Deep Learning @ 


Parameters Environments @ 


"NEUES Parameters Environments Q 


Qassem Pilottif [>] um ee = 
Output Detected Objects pes 
Qassem_Pilot_DetectObjectsUs - IE] By œ iB; T 2 
Model Definition > X and Y Extent 
CAUsersVDr Rasha\Downloads\BuildingFootprintExt| [as > Extent Coordinate System 
Arguments 
Name Value v Parallel Processing 
padding 100 A 
Parallel Processing Factor 
X | batch_size 2 
threshold 0.9 
return bboxes False v Raster Analysis 
test time augmentatic | | False Cell Size 
merge. policy mean Qassem Pilot.tif ~| a 
tile_size 400 Mask 
oO Non Maximum Suppression 
Y Processor Type 
Processor Type 
GPU M 


GPUID E Mg 


>) Detect Objects Using Deep Learning 


Running... 0% ® 


View Details Open History 


قد يكون النموذج المستخدم لا يتناسب مع منطقة العمل ؛ لذا نلجأ الى تدريب نموذج بأنفسنا ؛ وهذا يستدعى الحصول على 


بيانات تدريبية أولا ويمكن القيام بذلك على النحو الموضح أدناه : 


استخراج بيانات للتدريب: مثال استخراج المبانى 


هندستها " شكلها"). 
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Geoprocessing 


a 
2 
& 
3 
8 


Contents 
Y | Search p 
Fa A FH 

HAA‏ 7 لا 9 ع1 

Drawing Order 
4 Map 
4 [A Building 

m 
4 A Image 
RGB 
|I Red Bandi 


| Greer Band2 
[ Bue Band 3 


2- يتم انشاء حقلين حقل للاسم ويتم ادخال اسم الصنف وهنا Building) Og‏ ) وحقل القيمة و ادخال قيمة 
موحدة داخل جدول البيانات الوصفية كقيمة الصنف Value‏ ولتكون 1 ؛ واذا تم caue isl‏ لاكثر من صنف 


Building - MyProject5 - ArcGIS Pro o X | 


Field: E BE] Selection: jg «^ BS 5 ¢ = 


OBJECTID* SHAPE* Shape Length Shape Area Value Name = 


1 | 1 Polygon Z 0.000931 0 1 Building 
2 |2 Polygon Z 0.000872 0 1 Building 
HM 3 Polygon Z 0.00098 0 1 Building 
4 4 Polygon Z 0.000897 0 1 Building 
3 5 Polygon Z 0.000974 0 1 Building 
6 6 Polygon Z 0.000705 0 1 Building 
2 7 Polygon Z 0.001097 0 1 Building 
8 8 Polygon Z 0.001344 0 1 Building 
9 Polygon Z 0.000929 0 1 Building 
10 10 Polygon Z 0.001498 0 1 Building 
11 11 Polygon Z 0.001007 0 1 Building 
12:1 12 Polygon Z 0.000992 0 1 Building 
134 13 Polygon Z 0.001808 0 1 Building 
| 14 14 Polygon Z 0.002809 0 1 Building 
} 15 15 Polygon Z 0.001883 0 1 Building 
| 16 16 Polygon Z 0.001032 0 1 Building 
17 17 Polygon Z 0.001036 0 1 Building 
P: مه‎ Pisis S n ججمممم‎ ^ alnar 1 
ES |4 M Oof77selected Filters: YT -— 
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Export Training Data For Deep Learning استخدام أداة‎ 


حجم الصورة 


التداخل فى الصور 


RCNN‏ نوع البيانات الوصفية 


| Geoprocessing «Bx 


© Export Training Data For Deep Learning 6 


No pending edits. 
© © ¥ FF 


Parameters Environments 


Input Raster 
= 
Additional Input Raster 
m 
A Output Folder 


C:\Users\Dr Rasha\Desktop\Deep_Learning = 


Input Feature Class Or Classified Raster Or Table 
Building 

Class Value Field 
Value 


Buffer Radius 

Input Mask Polygons 
Building 

Image Format 
TIFF format 

Tile Size X 

Tile Size Y 

Stride X 

Stride Y 


Rotation Angle 
Reference System 
Map space 
( .] Output No Feature Tiles 
Metadata Format 
RCNN Masks 


Minimum Polygon Overlap 
Ratio 
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Geoprocessing 4ع د‎ 
© Export Training Data For Deep Learning ® 


No pending edits. 
€ em 


Parameters Environments 


Y Processing Extent 
Extent 
B- gi © 
v X and Y Extent 
Top 26.28390016 
Left 44.03276303 
Right |44.04046135 


| 


Bottom |26.27877528 


v Extent Coordinate System 
GCS WGS 1984 


? Parallel Processing 
v Raster Analysis 
Cell Size 


Qassem Pilot.tif ~| 2 


ERCIKYERYIIDIIANTIANEDITO-IRRIZ IW RN ACA ON GNU amc 
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J| M E <> | Deep_Learning 
EN -— 
ER = x 8 E 

* = L] us @Moveto~ X Delete 


Share View 


Pinto Quick Copy Paste ف‎ Scopyto~ =} Rename 
access el 
Clipboard Organize 
^ | > Deep Learning 
5 Name 
JF Quick access 
I images 
® This PC 
tif Network 


E stats 


J > Deep Learning > images 


Name 


jijijiji 


١ 


BHBOBOBOBOBOBOBOBODADAD 


D esri_accumulated_stats.json 
0 esri_model_definition.emd 


vo 


الناتج من الاداة 


ae DF lo 
Lh ` [J 
New Properties Select Start 
folder Y S^ backup 
New Open Backup 
ب‎ Ù Search Deep Learning ^ 


Date modified 


12/20/2023 12:13 PM 
12/20/2023 12:13 PM 
12/20/2023 12:13 PM 
12/20/2023 12:13 PM 
12/20/2023 12:13 PM 


ملف به الصور التى تم Lads!‏ كعينة 


Search images ^» 
Date modified 


12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
12/20/2023 12:28 PN 
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ملف مسميات الصور: 
ملف الاحصاء عن العينات التى تم اخذها عددها ؛ قيمتها 


I stats - Notepad = x 


File Edit Format View Help 
images = 66 *3*256*256 ^ 


Class feature statistics: 

features - 164 

features per image - [min - 1, mean - 2.48, max - 6] 
classes - 1 


cls name cls value images features min size mean size max size 
2 2 66 164 0.00 0.00 0.00 

v 
M > 


100% — Windows (CRLF) 


Geoprocessing 


© Train Deep Learning Model 


@ Input Training Data 


X | Deep_Learning 


Output Folder 
| Deep_Learning_DLmodel 


Max Epochs 20 
m 


Parameters Environments Q 
ni 
ini 


Pre-trained Model 


Model T 
MaskRCNN (Object detection) Y 


Model Arguments 
Name Value 


[ 1 ] 


v Data Preparation 
Data Augmentation 
[Default ~ 


Batch Size 4 
Validation % 10 


Chip Size | 224 
Resize To 
> Advanced 


190 


الناتج من الاداة : 


deep > model 
i 
Name Date modified Type Size 
* T ModelCharacteristics 2/6/2024 2:57 PM File folder 
+ C] model.dipk 2/6/2024 2:57 PM DLPK File 161,673 KB 
L] model.emd 2/6/2024 2:57 PM EMD File 3 KB 
a L] model.pth 2/6/2024 2:57 PM PTH File 172,049 KB 
* e model metrics 2/6/2024 2:57 PM Microsoft Edge HT... 1,218 KB 


Detect Objects Using Deep Learning بعد ذلك يتم استخدام اداة‎ 


Geoprocessing vox 
© Detect Objects Using Deep Learning 6 
Parameters Environments Q 


Input Raster 
Image Clip2 ¥ 


Output Detected Objects 
Image_Clip2_DetectObjectsUsi a 
Model Definition 


C:\Users\Dr Rasha\Documents\ArcGIS\Projects\MyProje | [e 


Arguments 
Name Value 


mé 15 
mse 4 
ese لمكت‎ 
1 ——3 


Û Non Maximum Suppression 


(>) Detect Objects Using Deep Learning 
Running... 0% ® 
View Details Open History 


Catalog | Geoprocessing 


191 


2-رسم خر انط الغطاء الأرضى باستخدام صورة جوية عالية الدقة (الدرونز): 


يتم انشاء Feature Class‏ لاستخراج بيانات التدريب 


F| Map كا‎ Catalog X ~ | Create Feature Class 
(€ (m F| v My. v vO) |=) Search MyProject4 pv Define 
e 
Name Type Geometry bct dis 
Cà MyProject4.gdb File Geodatabase Yen 
E .backups Folder : 1 
Alias 

im GpMessages Folder 

imal ImportLog Folder Feature Class Type 

fal MyProject4 index Folder , 

m peee = Type of features stored in the feature 

| Û land cover.gdb File Geodatabase class. 

Bg MyProject4.atbx Toolbox [Polygon 


Geometric Properties 


M Values - Coordinates include M 
values used to store route data. 


Z Values - Coordinates include Z 
values used to store 3D data. 


[V] Add output dataset to current map 


< Page 1/6 


> 
Titems 1 Item Selected All EH Next Finish Cancel 


يتم اخذ عينات من الصورة للتدريب ( تم اختيار الطرق — المبانى - الاراضى البيضاء ) 


انشاء حقلين dalo‏ جدول البيانات الوصفية واحد من نوع النصى لاسم الصنف واخر من النوع الرقمى لقيمة الصنف 
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Contents vax Evo FS 
T | 3 


ee‏ | ف © +0 ” 00 9 ع1 


Data Type 


Drawing Order 
4 E] Map 
A| clases 
= 


4 [v] Image 


| OBJECTID OBJECTID 


Object ID 


Geometry 


Double 
Double 


^ 


RGB 


| Red: Band_1 
Bl Green: Band 2 E clases X 


Bl Blue: Band 3 Field: EE FE Selection: By dB B Bas 


m, 


World Topographic Map 
World Hillshade 


Polygon Z 


Shape_Length Shape_Area 
51.367793 114296573. 


np | Polygon 2 


Click to add new row. 


حيث يتم تسمية الاصناف مع اعطاء قيمة لكل صنف وذلك على النحو التالى : 


Value Name 
1 Road 
2 Build 
3 Space 
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46.26173 | 117.679764 


clases - MyProject4 - ArcGIS Pro 


Field: FEA Calculate Selection: Cg Select By Attributes Ee Switch 
OBJECTID* SHAPE* Shape_Length Shape_Area ClassName ClassValue 
na 5 Polygon Z 41.911014 91.819638 road 1 
6 6 Polygon Z 37.737155 85.329121 road 1 
> 7 Polygon Z 34.9914, 52.130071 road 1 
8 8 Polygon Z 23.953636 33.165773 road 1 
9 |9 Polygon Z 36.221659 54.193149 | road 1 
10 10 Polygon Z 18.972843 19.723164 road 1 
11 | 11 Polygon Z 20.276034 | 21.090624 road 1 
12 12 Polygon Z 18.607886 20.288045 road 1 
13 | 13 Polygon Z 19.107319 | 22.120455 | road 1 
14 14 Polygon Z 13.427416 — 11.126013 road 1 
15 | 15 Polygon Z 49.996539 99,15637 | road 1 
16 16 Polygon Z 51.952803 140.072958 road 1 
17 | 17 Polygon Z 45.265971 | 121.795565 | road 1 
18 18 Polygon Z 68.227116 288.226112 Build 2 
19 | 19 Polygon Z 107.589307 | 499.097906 | Build 2 
20 20 Polygon Z 78.907427 346.977578 Build 2 
21 |21 Polygon Z 55.271877 | 132.681356 | Build 2 
22 | 22 PolygonZ 52.085543 165.613579 Build 2 
2 23 Polygon Z 57.234176 | 166.501079 | Build 2 
24 24 Polygon Z 82.503983  388.240343 Build 2 
25 | 25 Polygon Z 37.636158 | 68.697735 | spce 3 
26 26 Polygon Z 19.352093 21.658315 spce 3 
27 | 27 Polygon Z 18.826258 21.316826 | spce 3 
28 28 Polygon Z 16.477194 . 16.294994 spce 3 


Export Traning Data For Deep Learning بعد ذلك يتم استخدام أداة‎ 


يتم ادخال الصورة الجوية ؛ وبعد ذلك اختيار idly Feature Class‏ حقل Class Value‏ وبعد ذلك ضبط نسبة 
أخيرا اختيار الخوارزمية المناسبة ) Classified Tiles‏ 


RoatationAngle وكذلك‎ Strid x,y (0) الادخال‎ 
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© Export Training Data For Deep Learning 6 


Pending edits. 
ocw€lt 


Parameters Environments Q 


> 


dh Output Folder 
C:A\Users\DR-Rasha\Desktop\ Traning 


Feature Class Or Classified Raster Or Table 


JAJ 
3 
Z 


* DP DUE 


dn 
| 


Home Share View 


AG ois. | 8 عع 8ه‎ RA. م‎ 7 


0 Easy access > LA Edit 
‘Pinto Quick Copy Paste „= Move Copy Delete Rename Ni erties 
access [Ē] Paste shortcut to- to~ S Toties -  @History 
Clipboard Organize New Open 
e ~ ^ | | > Taning 
] Name ^ Date modified Type 
Fe Quick access 
{| images 3/24/2024 11:20 AM File folder 
@ OneDrive {| labels 3/24/2024 11:20 AM File folder 
EE This PC [T] esri_accumulated_stats,json 3/24/2024 11:20 AM JSON File 
p O esri_model_definition.emd 3/24/2024 11:20 AM EMD File 
IP 30 Objects = 
B map 3/24/2024 11:20 AM Text Document. 
Wi Desktop | E] stats 3/24/2024 11:20 AM Text Document 


Documents 
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7]] stats - Notepad 
File Edit Format View Help 
[images - 2959 *4*256*256 


Class feature statistics: 
features - 3035 


features per image - [min - 1, mean - 1.03, max 


classes - 3 
cls name 
road 

Build 

spce 


« 


Geoprocessing 
© Train Deep Learning Model 
Pending edits. 
o? ¥ 


Parameters Environments 


~ Processor Type 
Processor Type 


cls va 


| GPU 


GPU ID 


بفتح ملف Stats‏ نجد يحتوى على الثلاثة تصنيفات 


= [m] x 
^ 
- 2] 
lue images features min size mean size max size 
1 1253 1253 0.00 3.00 5.56 
2 1538 1614 0.00 4.00 5.56 
3 168 168 0.00 2.48 5.56 


Ln 1, Col 1 100% Windows (CRLF) UTF-8 


Geoprocessing «nx 


© Train Deep Learning Model 


Pending edits. 
© © © ¥ 


Parameters Environments 


O Input Training Data 
X | Traning = 


وإ سسا 


Å Output Folder 
— —M | 


Mex poh 
Pre-trained Model 

land 
Model 
U-Net (Pixel classification) Y 
Model Arguments 
Name Value 


ignore classes 
[el 


? Data Preparation 


v Advanced 
Learning Rate 
Backbone Model 
ResNet-34 Y 
Monitor Metric 
Validation loss M 
Weiaht Initialization Scheme 
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بعد ذلك يتم التصنيف من خلال اداة Classify Pixels Using Deep Learnng‏ : حيث يتم الصورة المطلوب عمل تصنيف 
لها واضافة النموذج ومن Evviroment‏ يتم اختيار GPR‏ 


Geoprocessing «nx. 
© Classify Pixels Using Deep Learning 
Pending edits. 
© © © ¥ 
Parameters Environments Q 
O Input Raster 


clases ~| 2 


+ Model Definition 
|æ 


Arguments 
Name Value 


Output Features 
clases_ClassifyPixelsUsingDe = 


[C] Overwrite attachments 
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3- استخراج النخيل باستخدام المرئيات الفضائية : 


وذلك بإستخدام نموذج Palm Tree Detection‏ : ويُستخدم للكشف عن أشجار النخيل في الصور الجوية والفضائية. يمكن 
استخدام الكشف عن أشجار النخيل لإنشاء جرد لأشجار النخيل» ومراقبة صحتها وموقعباء والتنبؤ بإنتاج زيت النخيل» 


© Authoritative 


asdi 


٠‏ يتم عمل تحميل للنموذج على الجباز كما تم شرحه سابقا 
© يتم استخدام نموذج Palm Tree Detection‏ من موقع Living Atlas‏ 


Palm Tree Detection 


X» Deep Learning Package By esri analytics 


Deep learning model to detect palm trees in high resolution imagery. 


B XX TT 


۰ يتم استخدام أداة Detect Objects Using Deep Learning‏ لإستدعاء النموذج والعمل عليه بنفس طريقه عمل 


الأمثة السابقة ثم عمل Run‏ 


Geoprocessing ا‎ e 
© : 1 - 
(€ Detect Objects Using Deep Learning CD 


Parameters Environments (Q 


Input Raster 


Palm trees.tif Y 
Output Detected Objects 
Palmtrees DetectObjectsUsing6 


Model Definition 
| DNDrRashsa Nofal\Deep Learning Sample\Dete asi 


Arguments 
Name Value 
padding 56 
| threshold 0.5 
nms overlap 0.1 
batch size 4 


exclude pad detectic| | True 


] Non Maximum Suppression 

1315 MET KL PEL 677,54336E 2,715,745.50N m. v "iz 
E Tee X hd 
Field: FF Add Selection: "i Select By Attributes Re Switch = 

OBJECTID* SHAPE* Shape Length Shape Area Class Name * Class Value e 
1 | 1 Polygon Z 30.397168 57.74924 Palm 1 
22 PolygonZ 30.526547 ^ 5824188 Palm 1 
B3 Polygon Z 32.725155 66.933487 Palm 1 
44 Polygon Z 26.18696 — 42.859806 Palm 1 
= EB >i Oof 132 selected Filters: ut--t + 100% + | 2 


® Run 
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4- تحديد صحة النخيل > 


بعد استخراج النخيل فى التطبيق السابق يمكننا قياس صحة النخيل من المرئيات الفضائية من خلال استخدام الأطياف 
المرئية فى الصور حيث يقوم مؤشر (CLG)‏ بتقدير كمية الكلوروفيل الموجودة في الغطاء النباتي بناءً على النسبة بين انعكاس 
الأشعة تحت الحمراء القريبة (NIR)‏ والنطاق الأخضرء تشير القيم المنخفضة للكلوروفيل إلى انخفاض قوة الغطاء النباتي 
ويمكن أن تساعدنا في تحديد أشجار النخيل التي تحتاج إلى علاج. 


طريقة حساب المؤشر: CLG = [(NIR / Green)-1]‏ 
NIR‏ = نطاق الأشعة تحت الحمراء القريبة 
Green‏ = قيم البكسل من النطاق الأخضر 


ويمكن تطبيق ذلك على النحو الموضح أدناه: 


-Raster Analysis من قائمة‎ Raster Functions إختيار‎ œ 
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Imagery 


ModelBusder 


se raster f'unctions for proces: 


wing Order 


Raster Functions 


Project System C 


Analysis [E 
Appearance 
Classification 
Conversion 
Correction 

Data Management 
Distance 

Distance (Legacy) 


Hydrology 


ti- 


Arithmetic Band 
Arithm 


ف unr‏ إختياز الصبورة المظلوبة واللؤشر المراد العمل ax Clgasle‏ إدخال stad‏ المظلونة ( خسب اللرئية 
المستخدمة). 


General Parameters 


البرتفاق إل Aa‏ متخفصة من الغطاء التبا 
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o‏ إستخدام أداة Zonal Statistics‏ ليصبح لدينا بيانات نقطية لعرض متوسط قيمة CLG‏ بالبكسل فوق كل نخلة تم 
تحديدهاء حيث تم تغطية مخرجات CLG‏ الجديدة بالمضلعات التي تم إنشاؤها من أداة اكتشاف الكائنات 
باستخدام أداة التعلم العميق ( عند استخراج النخيل فى النموذج السابق). 
حيث أن بالنقطة رقم 1 يتم تحديد طبقة المضلعاتء والنقطة رقم 2 الحقل الذي يحتوي على القيم التي تحدد كل 
Adlai‏ والنقطة رقم 3 يتم إختيار صورة CLG‏ الجديدة والنقطة رقم 4 لتحديد المخرجء وأما بالنقطة رقم 5 فيتم 
تحديد نوع الإحصائية التي سيتم حسابها. 


Geoprocessing 


o‏ استخدام أداة المعالجة الجغرافية Feature to Point‏ للحصول على النقطه الوسطى لكل مضلع لتسهيل تفسير 
المخرجات. 
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o‏ بعد ذلك يتم استخدام أداة Extract Values to Points‏ لاستخراج المخرجات الإحصائية إلى طبقة bla‏ و 
ترميزها ldg‏ لقيمة CLG‏ الخاصة بها. 


Parameters Environ 


Healthy 


Moderate 
Declining Health 


Needs Inspection 
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5- استخراج النصوص من الصور: 


وذلك بإستخدام نموذج Optical Character Recogniton‏ ويُستخدم تقنية التعرف البصري على الأحرف cA ASI‏ 
عن النصوص في الصور الفوتوغرافية والصور الجوية والفضائية. يمكن استخدامها للكشف عن النصوص في إشارات 
الطرق وأرقام المنازل وأسماء الأماكن والخرائط المساحية ومخططات قطع الأراضيء وما إلى ذلك. 


مما يسمح باستخراج النص بدقة. يمكن تطبيقه على مهام مختلفة مثل ALAISI‏ النص وقراءته تلقائيًا من اللوحات 
الإعلانية ولوحات اللافتات والخرائط الممسوحة ضبوئيًا وما إلى ذلكء وبالتالي تحويل الصور التي تحتوي على نص إلى بيانات. 


e‏ يتم عمل تحميل للنموذج على الجهاز كما تم شرحه سابقا. 

Living Atlas من موقع‎ Scene Text Parsing يتم استخدام نموذج‎ © 

۰ يتم استخدام أداة Detect Object Using Deep learning‏ لإستدعاء النموذج والعمل عليه بنفس طريقه عمل 
الأمثة السابقة ثم عمل Run‏ 
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هناك مجموعة من النماذج الأخرى لاستخراج النصوص Scene Text Parsing Tisi dis‏ 


Contents 


oP) ua 


EN 


Parameters Environments 


> Output Coordinates 


Output Coordinate System 


Geographic Transformations 


v Processing Extent 
Extent 
t -05 
4 -4795 

v Parallel Processing 


Parallel Processing Factor 


v Raster Analysis 


Cell Size 
Maximum of Inputs 


Mask 


v Processor Type 


Processor Type 


CPU 


GPU ID 


Detect Objects Using Deep Learning CP 


As Specified Below - 
= 639.5 
tos 
-| 2 
-| 2 


Geoprocessing 


| © Detect Objects Using Deep Learning 


Parameters Environments 


Input Raster 
parcel_sheet1jpg 


Output Detected Objects 
parcel sheet1 DetectObjectsU3 


Model Definition 
\\ndhfs2\Data\ready_to_use_models\microsite-release-v4\s 
Arguments 
Name 
threshold 04 


Value 


test_time_augmentation True 


Non Maximum Suppression 


Attrib.. Mana... 


History Symb. 


Expor.. 
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3 x | iM X F, Mao 


Û Mag! 


Drawing Order 
0 


ونموذج Text SAM‏ و هو نموذج يمكنه استخدام مطالبات نصية GIS‏ شكل حر لاستخراج ميزات من أنواع مختلفة 


ويتم استخدامه لاستخراج الكائنات مثل السيارات - الطائرات عن طريق أداة Detect Object Using Deep learning‏ 


فبكتابة اسم الکائن car‏ داخل Text Prompo‏ يتم استخراجها من الصورة كما موضح أداناه 


Geoprocessing vox 
© Detect Objects Using Deep Learning ® 
Parameters Environments @ 
O Input Raster 
Image.jpeg M 
Output Detected Objects : 
Image DetectObjectsUsingDeep3 iem 
* Model Definition 


Arguments 
Name 


text_prompt 


padding 


batch_size 


box threshold 


text threshold 


box, nms thresh 


. | Non Maximum Suppression 
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Address Standardization ج‎ 35435 


Deep Learning model to transform non-standard address to standard address. 
X» Deep learning package by esri analytics 


Item created: Jul 26, 2022 Item updated: Feb 1, 2024 Number of downloads: 2,517 


© Living Atlas 


ŞE Add to Favorites 


و يستخدم لتوحيد وتنسيق العناوين حيث يتم ادخال طبقة عناوين غير صحيحة أو غير منسقة ويقوم بتعديلها الى عناوين 
صحيحة كما موضح أدناه. 


= non std address Result 


1 | 23, yeerace crescent north east, medicine hat, ca | 23, terrace crescent ne, medicine hat, ca 


SESS prieta pedomelo. 49974, de [iS wipe pedormelo, 49574, ve 
3 | 60, chemin de la clótre, lissieu, 69380, fr | 60, chemin de la clótre, lissieu, 69380, fr 
4 | 132ter, rue oluis petit, denain, 59220, fr , 122ter, rue louis petit, denain, 59220, fr 
5 | 19, hofstatt, senftenberg, 3500, at | 19, hofstatt, senftenberg, 3500, at 
7 | 34, molsvej,6950, dk .. 34, molsvej, 6950, dk 
8 | 1, samild dal, st 20, 8800, dk | 1, asmild dal, st 20, 8800, dk 
|1 10, d guijarrak, 21668, es 10, d guijarral, 21668, es 
1: | 26.d palmitos, 4130 es 26 dpalitos4130es mE 
1:  campbeliparade, bondi beach, au | campbell parade, bondi beach, au — — 
1! | 1a, avenue du moulin vieux, venerque, 31810, fr | 1a, avenue du moulin vieux, venerque, 31810, fr 
1١ ١ 60, cljuan carlos i, 5120, es 60, d juan carlos i, 5120, es 
T| 7a, ag aplmeritas, 21430, es 7a, ag palmeritas, 21430, es 
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6- معرفة اعداد الحشود من صور ملتقطة : 


تحميل النموذج 


https://www.arcgis.com/home/item.html?id=4e427c0924b048099 1c6ebc58b5e7be6 


MyProject4 | P Com‏ ¥ فا - © e g‏ كع 


| Rasha - Abdulrahman Jazzar En 


Project Map Insert Analysis View Edit Imagery Share Help 
: ^ a 
XL). دق‎ ModelBuilder = zm © = 5h A Em rs DW 5 
M il) Python Y v d — س‎ oo 
History Ready To Tools Pairwise Summarize Spatial Feature Raster Data Suitability Visibility Exploratory Network Ne 
“© Environments Use Tools Buffer Within Join 2 Analysis» Analysis ~ Engineering Modeler Analysis 3D Analysis « Analysis~ 
Geoprocessing Is Tools Portal Workflows 
Contents 
Y | Search 
Kf KA Lr 
EGM/HORA 


Drawing Order 


4 |F| Map 


4 (¥) pngtreeunivers ClassifyObjec 


4 [V] pngtree-university-canteen-crowd-photogr... 
RGB 
Wl Red: Band_1 
[-] Green: Band 2 
Wl Blue: Band 3 


Living Atlas 289 من‎ Crowd Counting pretrained -يتم استخدام 5543 ج‎ 


.Classify Object Using Deep Learning -من أداة‎ 
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Buffer Within Join v Analysis» Analysis» Engineering Modeler Analysis 3D Analysis +» Ar " 
» y = y y Geoprocessing v Ox 


© Classify Objects Using Deep Learning @ 


[E] Tools Portal v 


vax. [EE] Map x 


Parameters Environments Q 


Input Raster ___ : 
nteen-crowd-photography-image 839403jpg ~| law 


Input Features 


m] 

Output Classified Objects Feature Class 
pngtreeunivers ClassifyObjec = 
- 


Model Definition x Model Definition 


Crowd Counting X v | 


e 
[T 
<q 


© (m Fj v Living Atlas Search Results for ' Crowd Counting’ e 


Organize v New Item v (m| —- — 
n assLabel 


4 & Portal B Title Type 
0 is Arguments 
| > @ My Content 3 Crowd Counting © © (5 Deep Leaning P5 Name Value 


e My Favorites L ] [ 
4B My Groups 


© My Organization 
& ArcGIS Online 
(B) Living Atlas 
ڪڪ ڪڪ‎ E 


Geoprocessing يا م ب‎ 
| 
| © Classify Objects Using Deep Learning @) 


Parameters Environments Q 


ARRA Rem pum 


^ 


Geographic Transformations 


J 


v Processing Extent 
Extent 
El aA- œi ذا‎ 4 
> Xand Y Extent 
> Extent Coordinate System 


v Parallel Processing 


Parallel Processing Factor 


v Raster Analysis 
Cell Size 
Maximum of Inputs * 


v Processor Type 
Processor Type 
CPU 5 


GPU ID 0| ب‎ 
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-ثم Run‏ بعد الانتهاء يظهر UT‏ اعداد الحشود داخل طبقة جديدة كما موضح. 


Hr ASE BM WEBS 2 مك م دع‎ Bee 


fadt hot forest Sue Se |! | Fete ذه‎ Sutiy Vel, مكنا بسار‎ Geos aires; Dota fade 
4^ Ene riremese, ine lete. Bate Wen mn « Meola al e Muse Manes iD Ameen Amr I Weed — 0 mney, Pure 
nigri ممت‎ 3 Tio bene Worries: Geoprecessing -Ax 
Comens ^x Bex $) amity Objects Using Deep Leming G 
Y | cam م‎ - ! Fa alent aronet 
-eh 
tomoa — 
-— goer unvenihy cartes cod photogs “| 
Crewing Orte bet 5mm 
"Dus = 
A Oops Convent Chyet Teetoro Cleve 
4v or om em hw qe tn m One - 
5 Mahe Defect 
نه‎ Pe nmn عم‎ gma حسم لجيه‎ sua cum Baie ant سمس‎ ty d 
IP 
ue Mil +ع‎ EM LIST c -— te 
سساو يه‎ 
mov E mpenn Ctm x hr vane 
toe Tle Saan LLLI بيه و‎ 
OU Om aeter Sape ^ hae ner or Lem arm Ares 
gg 
Si m x 2 EIA 
,2و0‎ Oyen وصجا‎ Deep (eemany 
© angie " 


210 


7- توقيع الاشجارمن صورالطائرات بدون الطيار: 


Detect Opject Using Deep Learning استخدام أداة‎ 


Living Atlas من‎ Tree Segmentation يتم اختيار نموذج‎ 


Model Definition x 


i > 
Geoprocessing v Ox 
OSAF] v Portal v Living Atlas Search Results for ‘tree’ |O tree x v| | © Detect Objects Using Deep Learning ® 
Organize v New Item v isl 5 
m - Parameters Environments Q 
4 & Portal 35 Title Type حر‎ Ei 
t @ My Content > Tree Detection (2 © (9 Deep Learning Pz كك كدوك‎ 
A ting_Ehsa_One_transparent_mosaic_group1.tif ~ | 
[^J My Favorites ap Tree Point Classification ooQ Deep Learning Pz Output Detected Objects 
È My Groups J£? Tree Segmentation © © Deep Learning Pz ORTHO Mapping. DetectObjects | = 
b a My Organization 32» Palm Tree Detection (2Q (5 Deep Learning Pz | Model Definition 
b €5 ArcGIS Online I% Tree Point Classification - New Zealand (2Q (9 Deep Learning Pz — 1 - 
T 5 Arguments 
Gh Living Atlas J5 Text SAM © © Deep Learning Pz NS Value 


4 [f Computer 


| | 


> 
> 
> 

¥ High Resolution Land Cover Classification - USA © © © Deep Learning Pz 
م‎ 3 Quick access f» 
> 
> 


I 
I 
| 
3 Segment Anything Model (SAM) © © Deep Learning Pz | C) Non Maximum Suppression 
> BH This Pc 32» Car Detection - New Zealand 0 © )© Deep Learning Pz | 
à OR hase 32» Land Cover Classification (Aerial Imagery) Q © Deep Learning Pz i 
TW Libraries | 
2 Network | 
Î Adobe Acrobat XI i 
[|] GISS&GeoAI 
b E Rasha 5 ; 
j A B Traning_Data A Find more items... 
Name | Tree Segmentation | [Deep Learning Model files (dlpk, e > | 
OK | Cancel - 


211 


8- استخراج خطوط الكهرباء من بيانات الليدار: 


يتم تخميل البياقات من الرابظ gSa GLY‏ استخدام اى بيانات G SILAS‏ للتدزيب . 


https://learn.arcgis.com/en/projects/classify-powerlines-from-lidar-point-clouds/#download-and- 


explore-data 
الملفات عبارة عن 3 مجلدات‎ 
: ويحتوى على‎ small Data مجلد‎ 


© بيانات التدريب (train-small.las)‏ والتى تستخدم لتدريب النموذج. 


© بيانات التحقق (val —smalllas)‏ للتحقق من صحة النموذج . 
© حدود للبيانات التدربية وبيانات التحقق . 


مجلد testdata.zip‏ يحتوي على مجموعة بيانات اختبارية وحدود المعالجة 5 DEM‏ 


مجلد results.zip‏ يحتوي على نتائج التدريب من مجموعة البيانات الكبيرة التي يمكنك استخدامها بدلا من تدريب النموذج 
لمجموعة البيانات الكبيرة. 


Laat والق هم‎ LAS ليان‎ ably ذخال‎ oxy 


MyProjectS | © Command Search (Ait+ | Rasha -‏ د 4 هو وق ® نع 
Project Map Insert Analysis View Edit Imagery Share Help LAS Dataset Layer Data Classifi‏ 
Y. Cut A 7I : BE aa Add Graphics Layer | J] Daa [ah E Attributes‏ 
A- dd Graphics Laye IX] E abe ees‏ 3) >< 3 
sa 8055 e| N oon | E‏ 
Paste Py Explore 75 “™ Bookmarks Go Basemap Add Select Select By Select By — ~~ Measure‏ 
E Copy Path UT ~ T TXW ~  Datav ~ Attributes Location TET ~‏ ~ 
Clipboard Navigate 5 Layer Selection 5‏ 
fi Scene x‏ 
Contents vox‏ 
T | Search py‏ 


EGH/H®O 
Drawing Order 


4 fit Scene 
4 3D Layers 


4 [| val small.lasd 


Value 


"m 112336 
Bl ose 


4l train. small.lasd 


Value 


= 1237.99 
m 810.89 
TK 
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كليك يمين على الطبقة واختيار Properties‏ نجد جميع الطبقات التق تجمعہا صورة الليدار ؛ من ضمنها — Wire‏ 
Conductor‏ وهى المعنية بالاهتمام فى هذا التطبيق. 


it Scene X 
Contents ب‎ DOX 
Y Seorch px 
ع‎ | oO I ] > 2 ت‎ 
= -i و‎ T e Layer Properties: train small lasd D x 
Drawing Order General Specify the selectable LAS points 
1 rw M 
99 p vem Classification Codes 
g3c 23 Source VÀ alt 
4| v^ train small.lasd | Elevation w^ 1 Unassigned 
Selection v] 2 Ground 
Coche اب‎ 5 High Vegetation 
Value v^ 6 Building 
- 1237.99 LAS Filter hive 
Surface Constraints | 14 Wire - Conductor 
- 810.89 w^ 15 Transmission Tower 
4 2D Layers 


w^ World Topographic Map 
اي‎ World Hillshade 
4 Elevation Surfaces 


4 Ground 


فالهدف هو تدريب نموذج لاكتشاف نقاط الليدار التي تمثل خطوط الكهرباء حتى نتمكن من تقييم مخاطر حرائق الغابات 
لخطوط الكهرباء القريبة من الأشجار بشكل أفضل. 


Symbology اختار‎ LAS Dataset Layer من‎ 


ES xr GU v "v MyProject5 | © Command Search (Ait Q 
Project Map Insert Analysis View Edit Imagery Share Help LAS Dataset Layer Dat 
e$ In Beyond «None» -| | [Æ] Transparency | 0.0% Y B [ ] File Extent |E > 
Es Out Beyond <None> -| | 5 Normal » E Flicker | 500.0 ms © Symbology 
e Normal M id 
Visibility Range Effects Compare Drawing 


تنسدل قائمة اختار منها Class‏ 
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icto | P Command Search (Ait+Q) 


Rasha - Abdulrahman Jazzar Engine 


LAS Dataset Layer Data Classification 
n. File Extent ES X 71. Display Limit 4,000,000 
^: Density Min Max 
Symbology AS ey, 
~ Dynamic Level of Detail 
4 Ally 
. Symbolize your layer using points 
| @ | E. el 
Elevation Class Return RGB Intensity 
"m 
Symbolize your layer using a surface 
1 Elevation Slope Aspect 
/ Symbolize your layer using lines 
l =. 
9i 
| Contour Edges 
4 
Project Map Insert Analysis View Edit Imagery Share Help LAS Dataset Layer Data Classification 
e In Beyond <None> M Transparency | 0.0% ~ LA C File Extent | | | 7 Display Limit 400 
>| | 35 Layer Blen 5 i O ms ^ 5 fiDensitv Mi 
$a Out Beyond <None> m Normal i Flicker | 500.0 ms > SE ;; Density Min =] 
` sil Normal - 3 Dynamic Level of Detail 
Contents ~ OX bets | Compare Drawing Point Thinning 


Y | Search 
EGH/7H®O 


Drawing Order 
4 fifi Scene 
4 3D Layers 


ajv] val small.lasd 


Classification 
* 1 Unassigned 
* 2 Ground 
5 High Vegetation 
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بعد ذلك (3G‏ خطوة إعداد مجموعة بيانات التدريب ؛ من أداة Prepare Point Cloud Training Data‏ ؛ يتم ادخال بيانات 
التدريب وبيانات التحقق وحدود كل مهما واختيار المرجع ‘Dem aids‏ ورا كتابة الطبقات المطلوب اسشناؤها Jais‏ 
Excluded Class Codes‏ من البيانات التدريبية والتى لسنا بحاجة الما ؛ وفى هذا JEL‏ تم كتابة 892( تمثل 610101180 و 7 
وهى noise‏ وفى Block Size‏ يراعى كتابة قيمة مناسبة لقطر كل ALS‏ من بيانات التدريب التي سيتم إنشاؤها وتم كتابة 82 
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Geoprocessing 
Prepare Point Cloud Training Data 
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تُظهر الرسوم البيانية جميع الكتل وهى تقريبًا تحتوي على عدد نقاط أقل من 8000( مما يؤكد أن حجم الكتلة البالغ 82 
قدمًا والحد الافتراضي لنقطة الكتلة البالغ 8192 مناسبًا لمجموعات البيانات هذه. 


نذهب الى مكان حفظ الملف المخرج ( ناتج الأداة ) نجد ان المخرجات عبارة عن ملفين على النحو الموضح أدناه ؛ 
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بعد ذلك يتم تدريب نموذج التصنيف باستخدام أداة Train Point Cloud Classification Model‏ 
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تصنيف خطوط sb «SII‏ باستخدام النموذج المدرب: 


لدينا بيانات يوجد بها تصنيف Ground‏ و noise‏ وباق التصنيفات عبارة عن unassigned‏ موجودة فى مجلد test‏ 
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